Meneroka enjin Mediastreamer2 VoIP. Bahagian 9

Bahan artikel diambil dari saya saluran zen.

interkom dupleks

Meneroka enjin Mediastreamer2 VoIP. Bahagian 9

Pada masa lalu artikel interkom dupleks telah diumumkan, dan dalam yang ini kami akan membuatnya.

Rajah ditunjukkan dalam rajah tajuk. Rantaian penapis yang lebih rendah membentuk laluan penghantaran, yang bermula dari kad bunyi. Ia menyediakan sampel isyarat daripada mikrofon. Secara lalai, ini berlaku pada kadar 8000 sampel sesaat. Kedalaman bit data yang digunakan oleh penapis audio pemancar media ialah 16 bit (ini tidak penting; jika anda mahu, anda boleh menulis penapis yang akan berfungsi dengan kedalaman bit yang lebih tinggi). Data dikumpulkan ke dalam blok 160 sampel. Oleh itu, setiap blok bersaiz 320 bait. Seterusnya, kami menyuap data ke input penjana, yang, apabila dimatikan, adalah "telus" kepada data. Saya menambahnya sekiranya anda bosan bercakap dengan mikrofon semasa penyahpepijatan - anda boleh menggunakan penjana untuk "menembak" laluan dengan isyarat nada.

Selepas penjana, isyarat pergi ke pengekod, yang menukar sampel 16-bit kami mengikut undang-undang Β΅ (standard G.711) kepada lapan-bit. Pada output pengekod, kami sudah mempunyai blok data separuh saiz. Secara umum, kita boleh menghantar data tanpa pemampatan jika kita tidak perlu menjimatkan trafik. Tetapi di sini adalah berguna untuk menggunakan pengekod, kerana Wireshark boleh menghasilkan semula audio daripada aliran RTP hanya apabila ia dimampatkan mengikut undang-undang Β΅ atau undang-undang.

Selepas pengekod, blok data yang lebih ringan dihantar ke penapis rtpsend, yang akan memasukkannya ke dalam paket RTP, menetapkan bendera yang diperlukan dan memberikannya kepada penstrim media untuk penghantaran melalui rangkaian dalam bentuk paket UDP.

Rantaian atas penapis membentuk laluan penerimaan; paket RTP yang diterima oleh penstrim media dari rangkaian memasuki penapis rtprecv, pada output yang ia muncul dalam bentuk blok data, setiap satunya sepadan dengan satu paket yang diterima. Blok hanya mengandungi data muatan; dalam artikel sebelumnya ia ditunjukkan dalam warna hijau dalam ilustrasi.

Seterusnya, blok dihantar ke penapis penyahkod, yang menukar sampel bait tunggal yang terkandung di dalamnya kepada yang linear, 16-bit. Yang sudah boleh diproses oleh penapis strim media. Dalam kes kami, kami hanya menghantarnya ke kad bunyi untuk main semula pada pembesar suara set kepala anda.

Sekarang mari kita beralih kepada pelaksanaan perisian. Untuk melakukan ini, kami akan menggabungkan fail penerima dan pemancar yang kami pisahkan sebelum ini. Sebelum ini, kami menggunakan tetapan tetap untuk port dan alamat, tetapi kini kami memerlukan program untuk dapat menggunakan tetapan yang kami tentukan semasa permulaan. Untuk melakukan ini, kami akan menambah fungsi untuk memproses hujah baris arahan. Selepas itu kami akan dapat menetapkan alamat IP dan port interkom yang kami ingin buat sambungan.

Mula-mula, mari tambahkan struktur pada program yang akan menyimpan tetapannya:

struct _app_vars
{
  int  local_port;              /* Π›ΠΎΠΊΠ°Π»ΡŒΠ½Ρ‹ΠΉ ΠΏΠΎΡ€Ρ‚. */
  int  remote_port;             /* ΠŸΠΎΡ€Ρ‚ ΠΏΠ΅Ρ€Π΅Π³ΠΎΠ²ΠΎΡ€Π½ΠΎΠ³ΠΎ устройства Π½Π° ΡƒΠ΄Π°Π»Π΅Π½Π½ΠΎΠΌ ΠΊΠΎΠΌΠΏΡŒΡŽΡ‚Π΅Ρ€Π΅. */
  char remote_addr[128];        /* IP-адрСс ΡƒΠ΄Π°Π»Π΅Π½Π½ΠΎΠ³ΠΎ ΠΊΠΎΠΌΠΏΡŒΡŽΡ‚Π΅Ρ€Π°. */
  MSDtmfGenCustomTone dtmf_cfg; /* Настройки тСстового сигнала Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€Π°. */
};

typedef struct _app_vars app_vars;

Program ini akan mengisytiharkan struktur jenis ini dipanggil vars.
Seterusnya, mari tambah fungsi untuk menghuraikan argumen baris arahan:

/* Ѐункция прСобразования Π°Ρ€Π³ΡƒΠΌΠ΅Π½Ρ‚ΠΎΠ² ΠΊΠΎΠΌΠ°Π½Π΄Π½ΠΎΠΉ строки Π²
* настройки ΠΏΡ€ΠΎΠ³Ρ€Π°ΠΌΠΌΡ‹. */
void  scan_args(int argc, char *argv[], app_vars *v)
{
    char i;
    for (i=0; i<argc; i++)
    {
        if (!strcmp(argv[i], "--help"))
        {
            char *p=argv[0]; p=p + 2;
            printf("  %s walkie talkienn", p);
            printf("--help      List of options.n");
            printf("--version   Version of application.n");
            printf("--addr      Remote abonent IP address string.n");
            printf("--port      Remote abonent port number.n");
            printf("--lport     Local port number.n");
            printf("--gen       Generator frequency.n");
            exit(0);
        }

        if (!strcmp(argv[i], "--version"))
        {
            printf("0.1n");
            exit(0);
        }

        if (!strcmp(argv[i], "--addr"))
        {
            strncpy(v->remote_addr, argv[i+1], 16);
            v->remote_addr[16]=0;
            printf("remote addr: %sn", v->remote_addr);
        }

        if (!strcmp(argv[i], "--port"))
        {
            v->remote_port=atoi(argv[i+1]);
            printf("remote port: %in", v->remote_port);
        }

        if (!strcmp(argv[i], "--lport"))
        {
            v->local_port=atoi(argv[i+1]);
            printf("local port : %in", v->local_port);
        }

        if (!strcmp(argv[i], "--gen"))
        {
            v -> dtmf_cfg.frequencies[0] = atoi(argv[i+1]);
                printf("gen freq : %in", v -> dtmf_cfg.frequencies[0]);
        }
    }
}

Hasil daripada penghuraian, argumen baris arahan akan diletakkan dalam medan struktur vars. Fungsi utama aplikasi adalah untuk mengumpul laluan penghantaran dan penerimaan daripada penapis; selepas menyambungkan ticker, kawalan akan dipindahkan ke gelung tak terhingga yang, jika frekuensi penjana ditetapkan kepada bukan sifar, akan memulakan semula penjana ujian supaya ia berfungsi tanpa henti.

Penjana memerlukan permulaan semula ini kerana reka bentuknya; atas sebab tertentu ia tidak dapat menghasilkan isyarat yang bertahan lebih daripada 16 saat. Perlu diingatkan bahawa tempohnya ditentukan oleh nombor 32-bit.

Keseluruhan program akan kelihatan seperti ini:

/* Π€Π°ΠΉΠ» mstest8.c Π˜ΠΌΠΈΡ‚Π°Ρ‚ΠΎΡ€ ΠΏΠ΅Ρ€Π΅Π³ΠΎΠ²ΠΎΡ€Π½ΠΎΠ³ΠΎ устройства. */

#include <mediastreamer2/mssndcard.h>
#include <mediastreamer2/dtmfgen.h>
#include <mediastreamer2/msrtp.h>

/* ΠŸΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π°Π΅ΠΌ Ρ„Π°ΠΉΠ» ΠΎΠ±Ρ‰ΠΈΡ… Ρ„ΡƒΠ½ΠΊΡ†ΠΈΠΉ. */
#include "mstest_common.c"

/*----------------------------------------------------------*/
struct _app_vars
{
    int  local_port;              /* Π›ΠΎΠΊΠ°Π»ΡŒΠ½Ρ‹ΠΉ ΠΏΠΎΡ€Ρ‚. */
    int  remote_port;             /* ΠŸΠΎΡ€Ρ‚ ΠΏΠ΅Ρ€Π΅Π³ΠΎΠ²ΠΎΡ€Π½ΠΎΠ³ΠΎ устройства Π½Π° ΡƒΠ΄Π°Π»Π΅Π½Π½ΠΎΠΌ ΠΊΠΎΠΌΠΏΡŒΡŽΡ‚Π΅Ρ€Π΅. */
    char remote_addr[128];        /* IP-адрСс ΡƒΠ΄Π°Π»Π΅Π½Π½ΠΎΠ³ΠΎ ΠΊΠΎΠΌΠΏΡŒΡŽΡ‚Π΅Ρ€Π°. */
    MSDtmfGenCustomTone dtmf_cfg; /* Настройки тСстового сигнала Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€Π°. */
};

typedef struct _app_vars app_vars;

/*----------------------------------------------------------*/
/* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Π΄ΡƒΠΏΠ»Π΅ΠΊΡΠ½ΡƒΡŽ RTP-сСссию. */
RtpSession* create_duplex_rtp_session(app_vars v)
{
    RtpSession *session = create_rtpsession (v.local_port, v.local_port + 1, FALSE, RTP_SESSION_SENDRECV);
    rtp_session_set_remote_addr_and_port(session, v.remote_addr, v.remote_port, v.remote_port + 1);
    rtp_session_set_send_payload_type(session, PCMU);
    return session;
}

/*----------------------------------------------------------*/
/* Ѐункция прСобразования Π°Ρ€Π³ΡƒΠΌΠ΅Π½Ρ‚ΠΎΠ² ΠΊΠΎΠΌΠ°Π½Π΄Π½ΠΎΠΉ строки Π²
* настройки ΠΏΡ€ΠΎΠ³Ρ€Π°ΠΌΠΌΡ‹. */
void  scan_args(int argc, char *argv[], app_vars *v)
{
    char i;
    for (i=0; i<argc; i++)
    {
        if (!strcmp(argv[i], "--help"))
        {
            char *p=argv[0]; p=p + 2;
            printf("  %s walkie talkienn", p);
            printf("--help      List of options.n");
            printf("--version   Version of application.n");
            printf("--addr      Remote abonent IP address string.n");
            printf("--port      Remote abonent port number.n");
            printf("--lport     Local port number.n");
            printf("--gen       Generator frequency.n");
            exit(0);
        }

        if (!strcmp(argv[i], "--version"))
        {
            printf("0.1n");
            exit(0);
        }

        if (!strcmp(argv[i], "--addr"))
        {
            strncpy(v->remote_addr, argv[i+1], 16);
            v->remote_addr[16]=0;
            printf("remote addr: %sn", v->remote_addr);
        }

        if (!strcmp(argv[i], "--port"))
        {
            v->remote_port=atoi(argv[i+1]);
            printf("remote port: %in", v->remote_port);
        }

        if (!strcmp(argv[i], "--lport"))
        {
            v->local_port=atoi(argv[i+1]);
            printf("local port : %in", v->local_port);
        }

        if (!strcmp(argv[i], "--gen"))
        {
            v -> dtmf_cfg.frequencies[0] = atoi(argv[i+1]);
                printf("gen freq : %in", v -> dtmf_cfg.frequencies[0]);
        }
    }
}

/*----------------------------------------------------------*/
int main(int argc, char *argv[])
{
    /* УстанавливаСм настройки ΠΏΠΎ ΡƒΠΌΠΎΠ»Ρ‡Π°Π½ΠΈΡŽ. */
    app_vars vars={5004, 7010, "127.0.0.1", {0}};

    /* УстанавливаСм настройки настройки ΠΏΡ€ΠΎΠ³Ρ€Π°ΠΌΠΌΡ‹ Π²
     * соотвСтствии с Π°Ρ€Π³ΡƒΠΌΠ΅Π½Ρ‚Π°ΠΌΠΈ ΠΊΠΎΠΌΠ°Π½Π΄Π½ΠΎΠΉ строки. */
    scan_args(argc, argv, &vars);

    ms_init();

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ экзСмпляры Ρ„ΠΈΠ»ΡŒΡ‚Ρ€ΠΎΠ² ΠΏΠ΅Ρ€Π΅Π΄Π°ΡŽΡ‰Π΅Π³ΠΎ Ρ‚Ρ€Π°ΠΊΡ‚Π°. */
    MSSndCard *snd_card =
        ms_snd_card_manager_get_default_card(ms_snd_card_manager_get());
    MSFilter *snd_card_read = ms_snd_card_create_reader(snd_card);
    MSFilter *dtmfgen = ms_filter_new(MS_DTMF_GEN_ID);
    MSFilter *rtpsend = ms_filter_new(MS_RTP_SEND_ID);

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Ρ„ΠΈΠ»ΡŒΡ‚Ρ€ ΠΊΠΎΠ΄Π΅Ρ€Π°. */
    MSFilter *encoder = ms_filter_create_encoder("PCMU");

    /* РСгистрируСм Ρ‚ΠΈΠΏΡ‹ Π½Π°Π³Ρ€ΡƒΠ·ΠΊΠΈ. */
    register_payloads();

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Π΄ΡƒΠΏΠ»Π΅ΠΊΡΠ½ΡƒΡŽ RTP-сСссию. */
    RtpSession* rtp_session= create_duplex_rtp_session(vars);
    ms_filter_call_method(rtpsend, MS_RTP_SEND_SET_SESSION, rtp_session);

    /* БоСдиняСм Ρ„ΠΈΠ»ΡŒΡ‚Ρ€Ρ‹ ΠΏΠ΅Ρ€Π΅Π΄Π°Ρ‚Ρ‡ΠΈΠΊΠ°. */
    ms_filter_link(snd_card_read, 0, dtmfgen, 0);
    ms_filter_link(dtmfgen, 0, encoder, 0);
    ms_filter_link(encoder, 0, rtpsend, 0);

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Ρ„ΠΈΠ»ΡŒΡ‚Ρ€Ρ‹ ΠΏΡ€ΠΈΠ΅ΠΌΠ½ΠΎΠ³ΠΎ Ρ‚Ρ€Π°ΠΊΡ‚Π°. */
    MSFilter *rtprecv = ms_filter_new(MS_RTP_RECV_ID);
    ms_filter_call_method(rtprecv, MS_RTP_RECV_SET_SESSION, rtp_session);

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Ρ„ΠΈΠ»ΡŒΡ‚Ρ€ Π΄Π΅ΠΊΠΎΠ΄Π΅Ρ€Π°, */
    MSFilter *decoder=ms_filter_create_decoder("PCMU");

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ Ρ„ΠΈΠ»ΡŒΡ‚Ρ€ Π·Π²ΡƒΠΊΠΎΠ²ΠΎΠΉ ΠΊΠ°Ρ€Ρ‚Ρ‹. */
    MSFilter *snd_card_write = ms_snd_card_create_writer(snd_card);

    /* БоСдиняСм Ρ„ΠΈΠ»ΡŒΡ‚Ρ€Ρ‹ ΠΏΡ€ΠΈΡ‘ΠΌΠ½ΠΎΠ³ΠΎ Ρ‚Ρ€Π°ΠΊΡ‚Π°. */
    ms_filter_link(rtprecv, 0, decoder, 0);
    ms_filter_link(decoder, 0,  snd_card_write, 0);

    /* Π‘ΠΎΠ·Π΄Π°Π΅ΠΌ источник Ρ‚Π°ΠΊΡ‚ΠΎΠ² - Ρ‚ΠΈΠΊΠ΅Ρ€. */
    MSTicker *ticker = ms_ticker_new();

    /* ΠŸΠΎΠ΄ΠΊΠ»ΡŽΡ‡Π°Π΅ΠΌ источник Ρ‚Π°ΠΊΡ‚ΠΎΠ². */
    ms_ticker_attach(ticker, snd_card_read);
    ms_ticker_attach(ticker, rtprecv);

    /* Если настройка частоты Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€Π° ΠΎΡ‚Π»ΠΈΡ‡Π½Π° ΠΎΡ‚ нуля, Ρ‚ΠΎ запускаСм Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€. */   
    if (vars.dtmf_cfg.frequencies[0])
    {
        /* НастраиваСм структуру, ΡƒΠΏΡ€Π°Π²Π»ΡΡŽΡ‰ΡƒΡŽ Π²Ρ‹Ρ…ΠΎΠ΄Π½Ρ‹ΠΌ сигналом Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€Π°. */
        vars.dtmf_cfg.duration = 10000;
        vars.dtmf_cfg.amplitude = 1.0;
    }

    /* ΠžΡ€Π³Π°Π½ΠΈΠ·ΡƒΠ΅ΠΌ Ρ†ΠΈΠΊΠ» пСрСзапуска Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€Π°. */
    while(TRUE)
    {
        if(vars.dtmf_cfg.frequencies[0])
        {
            /* Π’ΠΊΠ»ΡŽΡ‡Π°Π΅ΠΌ Π·Π²ΡƒΠΊΠΎΠ²ΠΎΠΉ Π³Π΅Π½Π΅Ρ€Π°Ρ‚ΠΎΡ€. */
            ms_filter_call_method(dtmfgen, MS_DTMF_GEN_PLAY_CUSTOM,
                    (void*)&vars.dtmf_cfg);
        }
        /* Π£ΠΊΠ»Π°Π΄Ρ‹Π²Π°Π΅ΠΌ Ρ‚Ρ€Π΅Π΄ Π² спячку Π½Π° 20мс, Ρ‡Ρ‚ΠΎΠ±Ρ‹ Π΄Ρ€ΡƒΠ³ΠΈΠ΅ Ρ‚Ρ€Π΅Π΄Ρ‹
         * прилоТСния ΠΏΠΎΠ»ΡƒΡ‡ΠΈΠ»ΠΈ врСмя Π½Π° Ρ€Π°Π±ΠΎΡ‚Ρƒ. */
        ms_usleep(20000);
    }
}

Mari kita susun. Kemudian program ini boleh dijalankan pada dua komputer. Atau pada satu, seperti yang akan saya lakukan sekarang. Kami melancarkan TShark dengan hujah berikut:

$ sudo tshark -i lo -f "udp dst port 7010" -P -V -O RTP -o rtp.heuristic_rtp:TRUE -x

Jika medan pelancaran dalam konsol hanya memaparkan mesej tentang permulaan tangkapan, maka ini adalah petanda yang baik - ini bermakna pelabuhan kami kemungkinan besar tidak diduduki oleh program lain. Di terminal lain, kami melancarkan contoh program yang akan mensimulasikan interkom "jauh" dengan menyatakan nombor port ini:

$ ./mstest8 --port 9010 --lport 7010

Seperti yang dapat dilihat daripada teks program, alamat IP lalai ialah 127.0.0.1 (local loopback).

Di terminal lain, kami melancarkan contoh kedua program, yang mensimulasikan peranti tempatan. Kami menggunakan hujah tambahan yang membenarkan penjana ujian terbina dalam berfungsi:

$ ./mstest8  --port 7010 --lport 9010 --gen 440

Pada masa ini, paket yang dihantar ke peranti "jauh" harus mula berkelip dalam konsol dengan TShark, dan nada berterusan akan kedengaran daripada pembesar suara komputer.

Jika semuanya berlaku seperti yang ditulis, maka kami mulakan semula salinan kedua program, tetapi tanpa kunci dan hujah "β€”gen 440". Anda kini akan memainkan peranan penjana. Selepas ini, anda boleh membuat bunyi ke dalam mikrofon; anda harus mendengar bunyi yang sepadan dalam pembesar suara atau fon kepala. Pengujaan diri akustik mungkin berlaku; kecilkan kelantangan pembesar suara dan kesannya akan hilang.

Jika anda menjalankannya pada dua komputer dan tidak keliru tentang alamat IP, maka hasil yang sama menanti anda - komunikasi suara berkualiti digital dua hala.

Dalam artikel seterusnya kita akan belajar cara menulis penapis kita sendiri - pemalam, terima kasih kepada kemahiran ini anda akan dapat menggunakan penstrim media bukan sahaja untuk audio dan video, tetapi juga di beberapa kawasan khusus lain.

Sumber: www.habr.com

Tambah komen