Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Hallo Habr. Wahrscheinlich hat jeder, der schon einmal Verwandte oder Freunde im Flugzeug getroffen oder verabschiedet hat, den kostenlosen Service Flightradar24 genutzt. Dies ist eine sehr praktische Möglichkeit, die Position des Flugzeugs in Echtzeit zu verfolgen.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

В der erste Teil Das Funktionsprinzip eines solchen Online-Dienstes wurde beschrieben. Wir werden nun damit fortfahren, herauszufinden, welche Daten vom Flugzeug an die Empfangsstation gesendet und empfangen werden, und diese selbst mit Python dekodieren.

Geschichte

Offensichtlich werden die Flugzeugdaten nicht ĂŒbermittelt, sodass Benutzer sie auf ihren Smartphones sehen können. Das System heißt ADS-B (Automatic Dependent Surveillance – Broadcast) und dient der automatischen Übermittlung von Informationen ĂŒber das Flugzeug an die Leitstelle – es werden Kennung, Koordinaten, Richtung, Geschwindigkeit, Höhe und andere Daten ĂŒbermittelt. FrĂŒher, vor der EinfĂŒhrung solcher Systeme, konnte der Dispatcher nur einen Punkt auf dem Radar sehen. Dies reichte nicht mehr aus, als es zu viele Flugzeuge gab.

Technisch gesehen besteht ADS-B aus einem Sender in einem Flugzeug, der regelmĂ€ĂŸig Informationspakete mit einer ziemlich hohen Frequenz von 1090 MHz sendet (es gibt auch andere Modi, die uns aber nicht so sehr interessieren, da nur hier Koordinaten ĂŒbertragen werden). NatĂŒrlich gibt es neben dem Sender auch irgendwo am Flughafen einen EmpfĂ€nger, aber fĂŒr uns als Nutzer ist ein eigener EmpfĂ€nger interessant.

Zum Vergleich: Das erste derartige System, Airnav Radarbox, das fĂŒr normale Benutzer konzipiert war, erschien 2007 und kostete etwa 900 US-Dollar. 250$ Ein Abonnement fĂŒr Netzwerkdienste kostet pro Jahr.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Bewertungen dieser ersten russischen Besitzer können im Forum gelesen werden Radioscanner. Da RTL-SDR-Receiver mittlerweile weit verbreitet sind, kann ein Ă€hnliches GerĂ€t fĂŒr 30 US-Dollar zusammengebaut werden; mehr dazu finden Sie hier der erste Teil. Kommen wir zum Protokoll selbst – schauen wir uns an, wie es funktioniert.

Signale empfangen

ZunĂ€chst muss das Signal aufgezeichnet werden. Das gesamte Signal hat eine Dauer von nur 120 Mikrosekunden. Um seine Komponenten bequem zu zerlegen, ist ein SDR-EmpfĂ€nger mit einer Abtastfrequenz von mindestens 5 MHz wĂŒnschenswert.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Nach der Aufnahme erhalten wir eine WAV-Datei mit einer Abtastrate von 5000000 Samples/Sek; 30 Sekunden einer solchen Aufnahme „wiegen“ etwa 500 MB. Das Anhören mit einem Mediaplayer bringt natĂŒrlich nichts – die Datei enthĂ€lt keinen Ton, sondern ein direkt digitalisiertes Radiosignal – genau so funktioniert Software Defined Radio.

Wir werden die Datei mit Python öffnen und verarbeiten. Wer selbst experimentieren möchte, kann eine Beispielaufzeichnung herunterladen Link.

Laden wir die Datei herunter und sehen, was darin enthalten ist.

from scipy.io import wavfile
import matplotlib.pyplot as plt
import numpy as np

fs, data = wavfile.read("adsb_20190311_191728Z_1090000kHz_RF.wav")
data = data.astype(float)
I, Q = data[:, 0], data[:, 1]
A = np.sqrt(I*I + Q*Q)

plt.plot(A)
plt.show()

Ergebnis: Wir sehen deutliche „Impulse“ vor dem Hintergrundrauschen.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Jeder „Impuls“ ist ein Signal, dessen Struktur deutlich sichtbar ist, wenn man die Auflösung im Diagramm erhöht.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Wie Sie sehen, stimmt das Bild durchaus mit der Beschreibung oben ĂŒberein. Sie können mit der Verarbeitung der Daten beginnen.

Dekodierung

Zuerst mĂŒssen Sie einen Bitstream erhalten. Das Signal selbst wird mittels Manchester-Kodierung kodiert:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Aus dem Niveauunterschied der Nibbles lĂ€sst sich leicht die echte „0“ und „1“ ermitteln.

    bits_str = ""
    for p in range(8):
        pos = start_data + bit_len*p
        p1, p2 = A[pos: pos + bit_len/2], A[pos + bit_len/2: pos + bit_len]
        avg1, avg2 = np.average(p1), np.average(p2)
        if avg1 < avg2:
            bits_str += "0"
        elif avg1 > avg2:
            bits_str += "1"

Die Struktur des Signals selbst ist wie folgt:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Schauen wir uns die Felder genauer an.

DF (Downlink-Format, 5 Bit) – bestimmt den Nachrichtentyp. Es gibt verschiedene Arten:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll
(Tabellenquelle)

Uns interessiert nur der Typ DF17, weil... Darin sind die Koordinaten des Flugzeugs enthalten.

ICAO (24 Bit) – Internationaler eindeutiger Code des Flugzeugs. Sie können das Flugzeug anhand seines Codes ĂŒberprĂŒfen Online (Leider hat der Autor die Aktualisierung der Datenbank eingestellt, aber sie ist immer noch relevant.) FĂŒr den Code 3c5ee2 haben wir beispielsweise die folgenden Informationen:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Bearbeiten: in Kommentare zum Artikel Auf die Beschreibung des ICAO-Codes wird ausfĂŒhrlicher eingegangen; ich empfehle Interessierten die LektĂŒre.

DATEN (56 oder 112 Bit) – die tatsĂ€chlichen Daten, die wir dekodieren werden. Die ersten 5 Datenbits sind das Feld Typencode, enthĂ€lt den Subtyp der gespeicherten Daten (nicht zu verwechseln mit DF). Von diesen Typen gibt es einige:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll
(Tabellenquelle)

Schauen wir uns einige Beispiele fĂŒr Pakete an.

Flugzeugidentifikation

Beispiel in BinÀrform:

00100 011 000101 010111 000111 110111 110001 111000

Datenfelder:

+------+------+------+------+------+------+------+------+------+------+
| TC,5 | EC,3 | C1,6 | C2,6 | C3,6 | C4,6 | C5,6 | C6,6 | C7,6 | C8,6 |
+------+------+------+------+------+------+------+------+------+------+

TC = 00100b = 4, jedes Zeichen C1-C8 enthÀlt Codes, die den Indizes in der Zeile entsprechen:
#ABCDEFGHIJKLMNOPQRSTUVWXYZ#####_###############0123456789######

Durch Dekodierung der Zeichenfolge lÀsst sich leicht der Flugzeugcode ermitteln: EWG7184

symbols = "#ABCDEFGHIJKLMNOPQRSTUVWXYZ#####_###############0123456789######"
code_str = ""
for p in range(8):
     c = int(bits_str[8 + 6*p:8 + 6*(p + 1)], 2)
     code_str += symbols[c]
print("Aircraft Identification:", code_str.replace('#', ''))

Luftposition

Wenn der Name einfach ist, sind die Koordinaten komplizierter. Sie werden in Form von 2, geraden und ungeraden Frames ĂŒbertragen. Feldcode TC = 01011b = 11.

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll

Beispiel fĂŒr gerade und ungerade Pakete:

01011 000 000101110110 00 10111000111001000 10000110101111001
01011 000 000110010000 01 10010011110000110 10000011110001000

Die Berechnung der Koordinaten selbst erfolgt nach einer ziemlich kniffligen Formel:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll
(Quelle)

Ich bin kein GIS-Experte und weiß daher nicht, woher es kommt. Wer weiß, schreibt es in die Kommentare.

Die Höhe wird als einfacher betrachtet – je nach spezifischem Bit kann sie entweder als Vielfaches von 25 oder 100 Fuß dargestellt werden.

Luftgeschwindigkeit

Paket mit TC=19. Das Interessante dabei ist, dass die Geschwindigkeit entweder genau, relativ zum Boden (Ground Speed), oder in der Luft, gemessen durch einen Flugzeugsensor (Airspeed), sein kann. Es werden auch viele verschiedene Felder ĂŒbermittelt:

Flightradar24 – wie funktioniert es? Teil 2, ADS-B-Protokoll
(Quelle)

Fazit

Wie Sie sehen, ist die ADS-B-Technologie zu einer interessanten Symbiose geworden, wenn ein Standard nicht nur fĂŒr Profis, sondern auch fĂŒr normale Benutzer nĂŒtzlich ist. Aber eine SchlĂŒsselrolle spielte dabei natĂŒrlich die gĂŒnstigere Technologie der digitalen SDR-Receiver, die es dem GerĂ€t ermöglicht, Signale mit Frequenzen ĂŒber einem Gigahertz buchstĂ€blich „fĂŒr ein paar Cent“ zu empfangen.

Im Standard selbst steckt natĂŒrlich noch viel mehr. Interessierte können sich das PDF auf der Seite ansehen ICAO oder besuchen Sie die oben bereits erwĂ€hnte Webseite.

Es ist unwahrscheinlich, dass all das fĂŒr viele von Nutzen sein wird, aber ich hoffe, dass zumindest die allgemeine Vorstellung davon, wie es funktioniert, erhalten bleibt.

Übrigens gibt es bereits einen fertigen Decoder in Python, den Sie studieren können hier. Und Besitzer von SDR-Receivern können einen fertigen ADS-B-Decoder zusammenbauen und in Betrieb nehmen von der Seite, dies wurde ausfĂŒhrlicher besprochen in der erste Teil.

Der Quellcode des im Artikel beschriebenen Parsers ist unterhalb des Ausschnitts angegeben. Dies ist ein Testbeispiel, das nicht vorgibt, eine Produktion zu sein, aber einige Dinge funktionieren darin und es kann zum Parsen der oben aufgezeichneten Datei verwendet werden.
Quellcode (Python)

from __future__ import print_function

from scipy.io import wavfile
from scipy import signal
import matplotlib.pyplot as plt
import numpy as np
import math
import sys


def parse_message(data, start, bit_len):
    max_len = bit_len*128
    A = data[start:start + max_len]
    A = signal.resample(A, 10*max_len)
    bits = np.zeros(10*max_len)
    bit_len *= 10
    start_data = bit_len*8

    # Parse first 8 bits
    bits_str = ""
    for p in range(8):
        pos = start_data + bit_len*p
        p1, p2 = A[pos: pos + bit_len/2], A[pos + bit_len/2: pos + bit_len]
        avg1, avg2 = np.average(p1), np.average(p2)
        if avg1 < avg2:
            bits_str += "0"
        elif avg1 > avg2:
            bits_str += "1"

    df = int(bits_str[0:5], 2)

    # Aircraft address (db - https://junzis.com/adb/?q=3b1c5c )
    bits_str = ""
    for p in range(8, 32):
        pos = start_data + bit_len * p
        p1, p2 = A[pos: pos + bit_len / 2], A[pos + bit_len / 2: pos + bit_len]
        avg1, avg2 = np.average(p1), np.average(p2)
        if avg1 < avg2:
            bits_str += "0"
        elif avg1 > avg2:
            bits_str += "1"
    # print "Aircraft address:", bits_str, hex(int(bits_str, 2))
    address = hex(int(bits_str, 2))

    # Filter specific aircraft (optional)
    # if address != "0x3c5ee2":
    #    return

    if df == 16 or df == 17 or df == 18 or df == 19 or df == 20 or df == 21:
        # print "Pos:", start, "DF:", msg_type

        # Data (56bit)
        bits_str = ""
        for p in range(32, 88):
            pos = start_data + bit_len*p
            p1, p2 = A[pos: pos + bit_len/2], A[pos + bit_len/2: pos + bit_len]
            avg1, avg2 = np.average(p1), np.average(p2)
            if avg1 < avg2:
                bits_str += "0"
                # bits[pos + bit_len / 2] = 50
            elif avg1 > avg2:
                bits_str += "1"

        # http://www.lll.lu/~edward/edward/adsb/DecodingADSBposition.html
        # print "Data:"
        # print bits_str[:8], bits_str[8:20],  bits_str[20:22], bits_str[22:22+17], bits_str[39:39+17]
        # Type Code:
        tc, ec = int(bits_str[:5], 2), int(bits_str[5:8], 2)
        # print("DF:", df, "TC:", tc)
        
        # 1 - 4  Aircraft identification
        # 5 - 8  Surface position
        # 9 - 18  Airborne position (w/ Baro Altitude)
        # 19  Airborne velocities

        if tc >= 1 and tc <= 4: # and (df == 17 or df == 18):
            print("Aircraft address:", address)
            print("Data:")
            print(bits_str[:8], bits_str[8:14],  bits_str[14:20], bits_str[20:26], bits_str[26:32], bits_str[32:38], bits_str[38:44])

            symbols = "#ABCDEFGHIJKLMNOPQRSTUVWXYZ#####_###############0123456789######"
            code_str = ""
            for p in range(8):
                c = int(bits_str[8 + 6*p:8 + 6*(p + 1)], 2)
                code_str += symbols[c]
            print("Aircraft Identification:", code_str.replace('#', ''))
            print()
        if tc == 11:
            print("Aircraft address:", address)
            print("Data: (11)")
            print(bits_str[:8], bits_str[8:20],  bits_str[20:22], bits_str[22:22+17], bits_str[39:39+17])

            # Bit 22 contains the F flag which indicates which CPR format is used (odd or even)
            # First frame has F flag = 0 so is even and the second frame has F flag = 1 so odd
            # f = bits_str[21:22]
            # print("F:", int(f, 2))

            # Altitude
            alt1b = bits_str[8:20]
            if alt1b[-5] == '1':
                bits = alt1b[:-5] + alt1b[-4:]
                n = int(bits, 2)
                alt_ft = n*25 - 1000
                print("Alt (ft)", alt_ft)

            # lat_dec = int(bits_str[22:22+17], 2)
            # lon_dec = int(bits_str[39:39+17], 2)
            # print("Lat/Lon:", lat_dec, lon_dec)

            # http://airmetar.main.jp/radio/ADS-B%20Decoding%20Guide.pdf
            print()
        if tc == 19:
            print("Aircraft address:", address)
            print("Data:")
            # print(bits_str)
            print(bits_str[:5], bits_str[5:8], bits_str[8:10], bits_str[10:13], bits_str[13] ,bits_str[14:24], bits_str[24], bits_str[25:35], bits_str[35:36], bits_str[36:65])

            subtype = int(bits_str[5:8], 2)
            # https://mode-s.org/decode/adsb/airborne-velocity.html
            spd, hdg, rocd = -1, -1, -1
            if subtype == 1 or subtype == 2:
                print("Velocity Subtype 1: Ground speed")
            
                v_ew_sign = int(bits_str[13], 2)
                v_ew = int(bits_str[14:24], 2) - 1       # east-west velocity
                
                v_ns_sign = int(bits_str[24], 2)
                v_ns = int(bits_str[25:35], 2) - 1       # north-south velocity
                
                v_we = -1*v_ew if v_ew_sign else v_ew
                v_sn = -1*v_ns if v_ns_sign else v_ns
                
                spd = math.sqrt(v_sn*v_sn + v_we*v_we)  # unit in kts
                
                hdg = math.atan2(v_we, v_sn)
                hdg = math.degrees(hdg)                 # convert to degrees
                hdg = hdg if hdg >= 0 else hdg + 360    # no negative val
            if subtype == 3:
                print("Subtype Subtype 3: Airspeed")
                hdg = int(bits_str[14:24], 2)/1024.0*360.0
                spd = int(bits_str[25:35], 2)
            
            vr_sign = int(bits_str[36], 2)
            vr = int(bits_str[36:45], 2)
            rocd = -1*vr if vr_sign else vr         # rate of climb/descend
            print("Speed (kts):", spd, "Rate:", rocd, "Heading:", hdg)
            print()

        # print()

def calc_coordinates():
    def _cprN(lat, is_odd):
        nl = _cprNL(lat) - is_odd
        return nl if nl > 1 else 1

    def _cprNL(lat):
        try:
            nz = 15
            a = 1 - math.cos(math.pi / (2 * nz))
            b = math.cos(math.pi / 180.0 * abs(lat)) ** 2
            nl = 2 * math.pi / (math.acos(1 - a/b))
            return int(math.floor(nl))
        except:
            # happens when latitude is +/-90 degree
            return 1
    
    def floor_(x):
        return int(math.floor(x))
  
    lat1b, lon1b, alt1b = "10111000111010011", "10000110111111000", "000101111001"
    lat2b, lon2b, alt2b = "10010011101011100", "10000011000011011", "000101110111"
    lat1, lon1, alt1 = int(lat1b, 2), int(lon1b, 2), int(alt1b, 2)
    lat2, lon2, alt2 = int(lat2b, 2), int(lon2b, 2), int(alt2b, 2)
    
    # 131072 is 2^17, since CPR lat and lon are 17 bits each
    cprlat_even, cprlon_even = lat1/131072.0, lon1/131072.0
    cprlat_odd, cprlon_odd = lat2/131072.0, lon2/131072.0
    print(cprlat_even, cprlon_even)

    j = floor_(59*cprlat_even - 60*cprlat_odd)
    print(j)

    air_d_lat_even = 360.0 / 60
    air_d_lat_odd = 360.0 / 59

    # Lat
    lat_even = float(air_d_lat_even * (j % 60 + cprlat_even))
    lat_odd = float(air_d_lat_odd * (j % 59 + cprlat_odd))
    if lat_even >= 270:
        lat_even = lat_even - 360
    if lat_odd >= 270:
        lat_odd = lat_odd - 360

    # Lon
    ni = _cprN(lat_even, 0)
    m = floor_(cprlon_even * (_cprNL(lat_even)-1) - cprlon_odd * _cprNL(lat_even) + 0.5)
    lon = (360.0 / ni) * (m % ni + cprlon_even)
    print("Lat", lat_even, "Lon", lon)

    # Altitude
    # Q-bit (bit 48) indicates whether the altitude is encoded in multiples of 25 or 100 ft (0: 100 ft, 1: 25 ft)
    # The value can represent altitudes from -1000 to +50175 ft.
    if alt1b[-5] == '1':
        bits = alt1b[:-5] + alt1b[-4:]
        n = int(bits, 2)
        alt_ft = n*25 - 1000
        print("Alt (ft)", alt_ft)


fs, data = wavfile.read("adsb_20190311_191728Z_1090000kHz_RF.wav")
T = 1/fs

print("Sample rate %f MS/s" % (fs / 1e6))
print("Cnt samples %d" % len(data))
print("Duration: %f s" % (T * len(data)))

data = data.astype(float)

cnt = data.shape[0]
# Processing only part on file (faster):
# cnt = 10000000
# data = data[:cnt]
print("Processing I/Q...")
I, Q = data[:, 0], data[:, 1]
A = np.sqrt(I*I + Q*Q)

bits = np.zeros(cnt)

# To see scope without any processing, uncomment
# plt.plot(A)
# plt.show()
# sys.exit(0)

print("Extracting signals...")

pos = 0
avg = 200
msg_start = 0
# Find beginning of each signal
while pos < cnt - 16*1024:
    # P1 - message start
    while pos < cnt - 16*1024:
        if A[pos] < avg and A[pos+1] > avg and pos - msg_start > 1000:
            msg_start = pos
            bits[pos] = 100
            pos += 4
            break
        pos += 1

    start1, start2, start3, start4 = msg_start, 0, 0, 0
    # P2
    while pos < cnt - 16*1024:
        if A[pos] < avg and A[pos+1] > avg:
            start2 = pos
            bits[pos] = 90
            pos += 1
            break
        pos += 1
    # P3
    while pos < cnt - 16*1024:
        if A[pos] < avg and A[pos+1] > avg:
            start3 = pos
            bits[pos] = 80
            pos += 1
            break
        pos += 1
    # P4
    while pos < cnt - 16*1024:
        if A[pos] < avg and A[pos+1] > avg:
            start4 = pos
            bits[pos] = 70
            pos += 1
            break
        pos += 1


    sig_diff = start4 - start1
    if 20 < sig_diff < 25:
        bits[msg_start] = 500
        bit_len = int((start4 - start1) / 4.5)
        # print(pos, start1, start4, ' - ', bit_len)
        # start = start1 + 8*bit_len
        parse_message(A, msg_start, bit_len)

        pos += 450

# For debugging: check signal start
# plt.plot(A)
# plt.plot(bits)
# plt.show()

Ich hoffe, es hat jemanden interessiert, vielen Dank fĂŒr Ihre Aufmerksamkeit.

Source: habr.com

Kaufen Sie zuverlĂ€ssiges Hosting fĂŒr Websites mit DDoS-Schutz und VPS-VDS-Servern đŸ”„ Kaufen Sie zuverlĂ€ssiges Webhosting mit DDoS-Schutz, VPS- und VDS-Server | ProHoster