Loome oma Google'i kõne filtreerimist Voximplanti ja Dialogflow põhjal

Võib-olla olete kuulnud või lugenud Call Screening funktsioonist, mille Google tutvustas oma Pixel telefonides Ameerika Ühendriikides. Ideed on suurepärased – kui teile kõnetatakse, alustab virtuaalne assistent vestlust, samal ajal kui näete seda vestlust jutustuses ja saate igal ajal assistendi asemel ise rääkima hakata. See on tänapäeval väga kasulik, kui pea pool telefonikõnedest on spämm, kuid samas ei soovi te jätta olulisi kõnesid vahele, mis ei ole teie kontaktide nimekirjas. Ainus murekoht on see, et see funktsionaalsus on saadaval ainult Pixel telefonides ja vaid Ameerika Ühendriikides. Mis siis, tõkked eksisteerivad, et neid ületada, eks? Seetõttu otsustasime rääkida, kuidas luua sarnane lahendus, kasutades Voximplant'i ja Dialogflow'd. Tulge allapoole.

Arhitektuur

Pakun, et ärgem raiskame aega Voximplant'i ja Dialogflow'de toimimise selgitamisele, vajadusel leiate selle kohta teavet internetist. Nii et laskem tutvuda meie Call Screening'i kontseptsiooniga.

Kujutage ette, et teil on juba number, mida kasutate iga päev ja kuhu saate olulisi kõnesid. Sellisel juhul vajame teist numbrit, mis oleks igal pool – e-kirjades, visiitkaartidel, kui täidate veebivorme jne. See number ühendatakse loomuliku keele töötlemise süsteemiga (meie puhul Dialogflow) ja suunab kõned teie peamisele numbrile, ainult kui te seda soovite. Skeemi kujul näeb see välja nii (pilt on klikkitav):

Mõistes arhitektuuri, saame hakata rakendama, kuid on üks tingimus: me ei tee mobiili- rakendust, et näidata dialooge Dialogflow vahel ja sissetuleva kõneleja vahel, vaid loome lihtsa veebi-rakenduse dialooge renderdades, et visuaalselt näidata Call Screening'i tööpõhimõtet. Sellises rakenduses on nupp Intervene, millele klõpsates Voximplant ühendab sissetuleva kõneleja helistava osalejaga, kui viimane otsustab ise rääkida.

Rakendus

Logige sisse oma Voximplant kontole ja looge uus rakendus, näiteks screening:

Avage jaotis „Numbrid“ ja ostke number, mis hakkab toimima vahendajana:

See the application screening, go to the 'Numbers' section, on the 'Available' tab. Here you will see the recently purchased number. Link it to the application using the 'Attach' button – in the window that appears, leave all default values and click 'Attach'.

While inside the application, go to the 'Scripts' tab and create a script myscreening – in it we will use the code from the article How to use Dialogflow Connector. The code will be slightly modified because we need to 'see' the dialogue between the caller and the assistant; all the code can be found here.

ATTENTION: you will need to change the value of the variable server to your ngrok server name (details about ngrok will be below). Also, insert your values on line 31, where your phone number is your main number (for example, personal mobile), and voximplant number is the number you recently purchased.

outbound_call = VoxEngine.callPSTN(“YOUR PHONE NUMBER”, “VOXIMPLANT NUMBER”)

The call to callPSTN will occur at the moment you decide to join the conversation and speak personally with the incoming subscriber.

Pärast skripti salvestamist peate selle siduma ostetud numbriga. Selleks, olles endiselt oma rakenduses, minge vahekaardile „Rohutamine“, et luua uus reegel – nupp „Uus reegel“ paremas ülanurgas. Sisestage nimi (näiteks allcalls), jätke mask vaikeväärtuseks (.* – see tähendab, et kõik sisenevad kõned töödeldakse selle reegli jaoks valitud skriptidega) ja määrake skript myscreening.

Salvesta reegel.

Edaspidi on telefoninumber seotud skriptiga. Viimase asjana peate siduma roboti rakendusega. Selleks minge vahekaardile „Dialogflow-ühend“, klõpsake nupul „Lisa Dialogflow agent“ paremas ülanurgas ja laadige üles oma Dialogflow agendi JSON-fail.

Kui vajate näidis-/testimisagenti, saate meie oma võtta sellelt lingilt: github.com/aylarov/callscreening/tree/master/dialogflow. Lihtsalt ärge nõudke temalt liiga palju, see on vaid näidis, mida võite omal soovil täiustada ja julgelt tulemusi jagada 🙂

Lihtne bakennd NodeJS-il

Lähme üles seadma lihtsat bakenndi NodeJS-il, näiteks sellist:
github.com/aylarov/callscreening/tree/master/nodejs

See on tavaline rakendus, mis vajab käivitamiseks vaid kahte käsku:

npm install
node index.js

Server käivitub teie masina 3000 pordil, seega ühendamiseks Voximplant pilve kasutame utiliiti ngrok. Kui olete installinud ngrok, käivitage see käsuga:

ngrok http 3000

Te näete domeeninime, mille ngrok on teie kohalikule serverile genereerinud – kopeerige see ja asendage muutujas server.

Klient

Kliendi rakendus näeb välja nagu lihtne vestlus, mille saate siit alla laadida.

Lihtsalt kopeerige kõik failid mõnda kataloogi oma veebi serveris ja see töötab. Failis script.js asendage muutujas server ngrok domeeninimi ja muutujas callee – ostetud number. Salvestage fail ja käivitage rakendus brauseris. Kui kõik on korras, näete arendaja paneelis WebSocketi ühendust.

Demos

Rakendust saab näha tegevuses selles videos:

P. S. Kui vajutate nuppu Intervene, suunatakse kõneleja minu telefoni numbrile, ja kui vajutate Disconnect – siis... Õige, kõne katkestatakse.

Allikas: habr.com