🥇हामी Node.js र ARDrone | प्रयोग गरेर हेलिकप्टरको आवाज नियन्त्रण कार्यक्रम गर्छौं प्रोहोस्टर

यस ट्यूटोरियलमा हामी Node.js र वेब स्पीच API प्रयोग गरेर भ्वाइस कन्ट्रोलको साथ ड्रोनको लागि एउटा कार्यक्रम सिर्जना गर्ने बारे हेर्नेछौं। Copter - Parrot ARDrone 2.0.

हामी सम्झाउँछौं: सबै Habr पाठकहरूका लागि - Habr प्रोमो कोड प्रयोग गरी कुनै पनि Skillbox पाठ्यक्रममा भर्ना गर्दा १०,००० रूबल छुट।

Skillbox सिफारिस गर्दछ: व्यावहारिक पाठ्यक्रम "मोबाइल विकासकर्ता प्रो".

परिचय

ड्रोनहरू अद्भुत छन्। मलाई मेरो क्वाडसँग खेल्न, तस्बिर र भिडियोहरू खिच्न वा रमाइलो गर्न साँच्चै आनन्द लाग्छ। तर मानवरहित हवाई सवारी (UAVs) मनोरञ्जनका लागि मात्र प्रयोग गरिन्छ। तिनीहरू सिनेमामा काम गर्छन्, हिमनदीहरू अध्ययन गर्छन्, र सेना र कृषि क्षेत्रका प्रतिनिधिहरूले प्रयोग गर्छन्।

यस ट्यूटोरियलमा हामी एउटा प्रोग्राम सिर्जना गर्ने बारे हेर्नेछौं जसले तपाईंलाई ड्रोन नियन्त्रण गर्न अनुमति दिनेछ। आवाज आदेशहरू प्रयोग गर्दै। हो, हेलिकप्टरले तपाईंले त्यसलाई गर्न भन्नुभएको कुरा गर्नेछ। लेखको अन्त्यमा त्यहाँ एक तयार कार्यक्रम र UAV नियन्त्रण को भिडियो छ।

आयरन

हामीलाई निम्न चाहिन्छ:

तोता एआरड्रोन २.०;
इथरनेट केबल;
राम्रो माइक्रोफोन।

विकास र व्यवस्थापन Windows/Mac/Ubuntu सँग कार्यस्थानहरूमा गरिनेछ। व्यक्तिगत रूपमा, मैले Mac र Ubuntu 18.04 सँग काम गरें।

सफ्टवेयर

बाट Node.js को नवीनतम संस्करण डाउनलोड गर्नुहोस् आधिकारिक साइट.

पनि आवश्यक छ Google Chrome को नवीनतम संस्करण.

हेलिकप्टर बुझ्दै

तोता ARDrone कसरी काम गर्छ भनेर बुझ्न प्रयास गरौं। यो हेलिकप्टरमा चारवटा मोटर छन्।

विपक्षी मोटरहरू एउटै दिशामा काम गर्छन्। एउटा जोडी घडीको दिशामा घुम्छ, अर्को घडीको विपरीत दिशामा। ड्रोनले पृथ्वीको सतहको सापेक्ष झुकावको कोण परिवर्तन गरेर, मोटरहरूको घुमाउने गति र अन्य धेरै चालु चलनहरू परिवर्तन गरेर चल्छ।

हामीले माथिको रेखाचित्रमा देख्न सक्छौं, विभिन्न प्यारामिटरहरू परिवर्तन गर्दा हेलिकप्टरको चालको दिशामा परिवर्तन हुन्छ। उदाहरणका लागि, बायाँ र दायाँ रोटरहरूको घुमाउने गति घटाउँदा वा बढाउँदा रोल सिर्जना हुन्छ। यसले ड्रोनलाई अगाडि वा पछाडि उड्न अनुमति दिन्छ।

मोटरहरूको गति र दिशा परिवर्तन गरेर, हामी झुकाव कोणहरू सेट गर्छौं जसले हेलिकप्टरलाई अन्य दिशाहरूमा जान अनुमति दिन्छ। वास्तवमा, हालको परियोजनाको लागि वायुगतिकी अध्ययन गर्न आवश्यक छैन, तपाईंले आधारभूत सिद्धान्तहरू बुझ्न आवश्यक छ।

कसरी तोता ARDrone काम गर्दछ

ड्रोन एक Wi-Fi हटस्पट हो। हेलिकप्टरमा आदेशहरू प्राप्त गर्न र पठाउनको लागि, तपाईंले यस बिन्दुमा जडान गर्न आवश्यक छ। त्यहाँ धेरै फरक अनुप्रयोगहरू छन् जसले तपाईंलाई क्वाडकोप्टरहरू नियन्त्रण गर्न अनुमति दिन्छ। यो सबै केहि यस्तो देखिन्छ:

ड्रोन जडान हुने बित्तिकै, टर्मिनल खोल्नुहोस् र टेलनेट 192.168.1.1 - यो हेलिकप्टरको आईपी हो। लिनक्स को लागी तपाईले प्रयोग गर्न सक्नुहुन्छ लिनक्स व्यस्त बक्स.

आवेदन वास्तुकला

हाम्रो कोड निम्न मोड्युलहरूमा विभाजित हुनेछ:

आवाज पत्ता लगाउनको लागि स्पीच API संग प्रयोगकर्ता इन्टरफेस;
फिल्टरिङ आदेशहरू र मानकसँग तुलना गर्दै;
ड्रोनमा आदेशहरू पठाउँदै;
प्रत्यक्ष भिडियो प्रसारण।

इन्टरनेट जडान हुँदासम्म API ले काम गर्छ। यो सुनिश्चित गर्न, हामी इथरनेट जडान थप्छौं।

यो एउटा अनुप्रयोग सिर्जना गर्न समय हो!

कोड

पहिले, नयाँ फोल्डर सिर्जना गरौं र टर्मिनल प्रयोग गरेर यसलाई स्विच गरौं।

त्यसपछि हामी तलका आदेशहरू प्रयोग गरेर नोड प्रोजेक्ट सिर्जना गर्छौं।

पहिले, हामी आवश्यक निर्भरताहरू स्थापना गर्छौं।

npm स्थापना

हामी निम्न आदेशहरूलाई समर्थन गर्नेछौं:

जमिन छाड्नु;
अवतरण;
माथि - ड्रोन आधा मिटर बढ्छ र होभर्स;
तल - आधा मिटर खस्छ र जम्छ;
बाँयामा - बायाँ तिर आधा मिटर जान्छ;
दाँयामा - दाँयामा आधा मिटर जान्छ;
रोटेशन - घडीको दिशामा 90 डिग्री घुमाउँछ;
अगाडि - आधा मिटर अगाडि जान्छ;
पछाडि - आधा मिटर पछाडि जान्छ;
रोक।

यहाँ कोड छ जसले तपाईंलाई आदेशहरू स्वीकार गर्न, तिनीहरूलाई फिल्टर गर्न र ड्रोन नियन्त्रण गर्न अनुमति दिन्छ।

const express = require('express');
const bodyparser = require('body-parser');
var arDrone = require('ar-drone');
const router = express.Router();
const app = express();
const commands = ['takeoff', 'land','up','down','goleft','goright','turn','goforward','gobackward','stop'];
 
var drone  = arDrone.createClient();
// disable emergency
drone.disableEmergency();
// express
app.use(bodyparser.json());
app.use(express.static(__dirname + '/public'));
 
router.get('/',(req,res) => {
    res.sendFile('index.html');
});
 
router.post('/command',(req,res) => {
    console.log('command recieved ', req.body);
    console.log('existing commands', commands);
    let command = req.body.command.replace(/ /g,'');
    if(commands.indexOf(command) !== -1) {
        switch(command.toUpperCase()) {
            case "TAKEOFF":
                console.log('taking off the drone');
                drone.takeoff();
            break;
            case "LAND":
                console.log('landing the drone');
                drone.land();
            break;
            case "UP":
                console.log('taking the drone up half meter');
                drone.up(0.2);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },2000);
            break;
            case "DOWN":
                console.log('taking the drone down half meter');
                drone.down(0.2);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },2000);
            break;
            case "GOLEFT":
                console.log('taking the drone left 1 meter');
                drone.left(0.1);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },1000);
            break;
            case "GORIGHT":
                console.log('taking the drone right 1 meter');
                drone.right(0.1);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },1000);
            break;
            case "TURN":
                console.log('turning the drone');
                drone.clockwise(0.4);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },2000);
            break;
            case "GOFORWARD":
                console.log('moving the drone forward by 1 meter');
                drone.front(0.1);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },2000);
            break;
            case "GOBACKWARD":
                console.log('moving the drone backward 1 meter');
                drone.back(0.1);
                setTimeout(() => {
                    drone.stop();
                    clearTimeout();
                },2000);
            break;
            case "STOP":
                drone.stop();
            break;
            default:
            break;    
        }
    }
    res.send('OK');
});
 
app.use('/',router);
 
app.listen(process.env.port || 3000);

र यहाँ HTML र JavaScript कोड छ जसले प्रयोगकर्तालाई सुन्छ र नोड सर्भरमा आदेश पठाउँछ।

<!DOCTYPE html>
    <head>
        <meta charset="utf-8">
        <meta http-equiv="X-UA-Compatible" content="IE=edge">
        <title>Voice Controlled Notes App</title>
        <meta name="description" content="">
        <meta name="viewport" content="width=device-width, initial-scale=1">
        <link rel="stylesheet" href="https://cdnjs.cloudflare.com/ajax/libs/shoelace-css/1.0.0-beta16/shoelace.css">
        <link rel="stylesheet" href="styles.css">
 
    </head>
    <body>
        <div class="container">
 
            <h1>Voice Controlled Drone</h1>
            <p class="page-description">A tiny app that allows you to control AR drone using voice</p>
 
            <h3 class="no-browser-support">Sorry, Your Browser Doesn't Support the Web Speech API. Try Opening This Demo In Google Chrome.</h3>
 
            <div class="app">
                <h3>Give the command</h3>
                <div class="input-single">
                    <textarea id="note-textarea" placeholder="Create a new note by typing or using voice recognition." rows="6"></textarea>
                </div>    
                <button id="start-record-btn" title="Start Recording">Start Recognition</button>
                <button id="pause-record-btn" title="Pause Recording">Pause Recognition</button>
                <p id="recording-instructions">Press the <strong>Start Recognition</strong> button and allow access.</p>
 
            </div>
 
        </div>
 
        <script src="https://cdnjs.cloudflare.com/ajax/libs/jquery/3.2.1/jquery.min.js"></script>
        <script src="script.js"></script>
 
    </body>
</html>

र जाभास्क्रिप्ट कोडलाई आवाज आदेशहरूसँग काम गर्न, तिनीहरूलाई नोड सर्भरमा पठाउँदै।

try {
 var SpeechRecognition = window.SpeechRecognition || window.webkitSpeechRecognition;
 var recognition = new SpeechRecognition();
 }
 catch(e) {
 console.error(e);
 $('.no-browser-support').show();
 $('.app').hide();
 }
// other code, please refer GitHub source
recognition.onresult = function(event) {
// event is a SpeechRecognitionEvent object.
// It holds all the lines we have captured so far.
 // We only need the current one.
 var current = event.resultIndex;
// Get a transcript of what was said.
var transcript = event.results[current][0].transcript;
// send it to the backend
$.ajax({
 type: 'POST',
 url: '/command/',
 data: JSON.stringify({command: transcript}),
 success: function(data) { console.log(data) },
 contentType: "application/json",
 dataType: 'json'
 });
};

अनुप्रयोग सुरु गर्दै

कार्यक्रम निम्नानुसार सुरु गर्न सकिन्छ (यो सुनिश्चित गर्न महत्त्वपूर्ण छ कि हेलिकप्टर Wi-Fi मा जडान भएको छ र इथरनेट केबल कम्प्युटरमा जडान भएको छ)।

लोकलहोस्ट खोल्नुहोस्: 3000 ब्राउजरमा र स्टार्ट रिकग्निसनमा क्लिक गर्नुहोस्।

हामी ड्रोन नियन्त्रण गर्ने प्रयास गर्छौं र खुसी छौं।

ड्रोनबाट भिडियो प्रसारण

परियोजनामा, नयाँ फाइल सिर्जना गर्नुहोस् र त्यहाँ यो कोड प्रतिलिपि गर्नुहोस्:

const http = require("http");
const drone = require("dronestream");
 
const server = http.createServer(function(req, res) {
 
require("fs").createReadStream(__dirname + "/public/video.html").pipe(res);
 });
 
drone.listen(server);
 
server.listen(4000);

र यहाँ HTML कोड छ, हामी यसलाई सार्वजनिक फोल्डर भित्र राख्छौं।

<!doctype html>
 <html>
 <head>
 <meta http-equiv="content-type" content="text/html; charset=utf-8">
 <title>Stream as module</title>
 <script src="/dronestream/nodecopter-client.js" type="text/javascript" charset="utf-8"></script>
 </head>
 <body>
 <h1 id="heading">Drone video stream</h1>
 <div id="droneStream" style="width: 640px; height: 360px"> </div>
 
<script type="text/javascript" charset="utf-8">
 
new NodecopterStream(document.getElementById("droneStream"));
 
</script>
 
</body>
</html>

अगाडिको क्यामेराबाट भिडियो हेर्नको लागि लोकलहोस्ट:8080 लन्च गर्नुहोस् र जडान गर्नुहोस्।

सहायक सुझावहरू

यो ड्रोन घर भित्र उडाउनुहोस्।
उड्नु अघि सधैं आफ्नो ड्रोनमा सुरक्षा कभर राख्नुहोस्।
ब्याट्री चार्ज भएको छ कि छैन जाँच गर्नुहोस्।
यदि ड्रोनले अनौठो व्यवहार गर्छ भने, यसलाई समात्नुहोस् र यसलाई पल्टाउनुहोस्। यो कार्यले हेलिकप्टरलाई आपतकालीन मोडमा राख्नेछ र रोटरहरू तुरुन्तै बन्द हुनेछन्।

तयार कोड र डेमो

लाइभ डेमो

डाउनलोड

भयो!

कोड लेख्ने र त्यसपछि मेसिनले पालन गर्न थालेको हेर्दा तपाईंलाई आनन्द दिनेछ! अब हामीले ड्रोनलाई भ्वाइस आदेशहरू सुन्न कसरी सिकाउने भनेर पत्ता लगायौं। वास्तवमा, त्यहाँ धेरै सम्भावनाहरू छन्: प्रयोगकर्ता अनुहार पहिचान, स्वायत्त उडानहरू, इशारा पहिचान र अधिक।

कार्यक्रम सुधार गर्न के सुझाव दिन सक्नुहुन्छ?

Skillbox सिफारिस गर्दछ:

अनलाइन पाठ्यक्रम लागू गरियो "पाइथन डाटा विश्लेषक".

अनलाइन कोर्स "पेशे फ्रन्टएन्ड विकासकर्ता".

एक वर्षको व्यावहारिक पाठ्यक्रम "0 देखि PRO मा PHP विकासकर्ता".

स्रोत: www.habr.com

हामी Node.js र ARDrone प्रयोग गरेर हेलिकप्टरको आवाज नियन्त्रण कार्यक्रम गर्छौं