{"id":89110,"date":"2020-07-18T19:42:10","date_gmt":"2020-07-18T17:42:10","guid":{"rendered":"https:\/\/prohoster.info\/blog\/administrirovanie\/obshhij-obzor-arhitektury-servisa-dlya-oczenki-vneshnosti-na-osnove-nejronnyh-setej"},"modified":"2020-07-18T19:42:10","modified_gmt":"2020-07-18T17:42:10","slug":"obshhij-obzor-arhitektury-servisa-dlya-oczenki-vneshnosti-na-osnove-nejronnyh-setej","status":"publish","type":"post","link":"https:\/\/prohoster.info\/ro\/blog\/administrirovanie\/obshhij-obzor-arhitektury-servisa-dlya-oczenki-vneshnosti-na-osnove-nejronnyh-setej","title":{"rendered":"Prezentare general\u0103 a arhitecturii serviciului pentru evaluarea aspectului bazat\u0103 pe re\u021bele neuronale","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

\"Prezentare<\/p>\n

Introducere<\/h2>\n

<\/p>\n

Bun\u0103!<\/p>\n

<\/p>\n

\u00cen acest articol, voi \u00eemp\u0103rt\u0103\u0219i experien\u021ba de construire a unei arhitecturi microservicii pentru un proiect care utilizeaz\u0103 re\u021bele neuronale.<\/p>\n

<\/p>\n

Vom discuta despre cerin\u021bele arhitecturii, vom analiza diferite diagrame structurale, vom examina fiecare component\u0103 a arhitecturii gata realizate \u0219i vom evalua metricile tehnice ale solu\u021biei.<\/p>\n

<\/p>\n

Lectur\u0103 pl\u0103cut\u0103!<\/p>\n

<\/a><\/noindex><\/p>\n

C\u00e2teva cuvinte despre problem\u0103 \u0219i solu\u021bia acesteia<\/h2>\n

<\/p>\n

Ideea de baz\u0103 este de a evalua atractivitatea unei persoane pe o scar\u0103 de la 1 la 10, pe baza unei fotografii.<\/p>\n

<\/p>\n

\u00cen acest articol, ne vom abate de la descrierea re\u021belelor neuronale utilizate \u0219i a procesului de preg\u0103tire a datelor \u0219i a \u00eenv\u0103\u021b\u0103rii. Cu toate acestea, \u00eentr-una dintre publica\u021biile viitoare, ne vom \u00eentoarce cu siguran\u021b\u0103 la analiza pipeline-ului de evaluare la un nivel mai profund.<\/p>\n

<\/p>\n

Acum, vom trece prin pipeline-ul de evaluare la un nivel \u00eenalt, pun\u00e2nd accent pe interac\u021biunea microserviciilor \u00een contextul arhitecturii generale a proiectului.\u00a0<\/p>\n

<\/p>\n

\u00cen lucrul la pipeline-ul de evaluare a atractivit\u0103\u021bii, sarcina a fost descompus\u0103 \u00een urm\u0103toarele componente:<\/p>\n

<\/p>\n

    \n
  1. Detectarea fe\u021belor din fotografii<\/li>\n
  2. Evaluarea fiec\u0103rei fe\u021be<\/li>\n
  3. Redarea rezultatelor<\/li>\n<\/ol>\n

    <\/p>\n

    Prima sarcin\u0103 este rezolvat\u0103 cu ajutorul MTCNN<\/a><\/noindex>. Pentru a doua, a fost antrenat\u0103 o re\u021bea neuronal\u0103 convolu\u021bional\u0103 pe PyTorch, ca backbone a fost folosit ResNet34<\/a><\/noindex> - av\u00e2nd \u00een vedere balan\u021ba 'calitate \/ vitez\u0103 de inferen\u021b\u0103 pe CPU'<\/p>\n

    \n\"Prezentare<\/p>\n

    Diagrama func\u021bional\u0103 a pipeline-ului de evaluare<\/i><\/p>\n

    <\/p>\n

    Analiza cerin\u021belor arhitecturii proiectului<\/h2>\n

    <\/p>\n

    \u00cen ciclu de via\u021b\u0103 ML<\/a><\/noindex> etapele de lucru asupra arhitecturii \u0219i automatizarea desf\u0103\u0219ur\u0103rii modelului sunt adesea unele dintre cele mai costisitoare \u00een timp \u0219i resurse.<\/p>\n

    \n\"Prezentare<\/p>\n

    Ciclul de via\u021b\u0103 al unui proiect ML<\/i><\/p>\n

    <\/p>\n

    Acest proiect nu face excep\u021bie - a fost luat\u0103 decizia de a \u00eenv\u00e2rti pipeline-ul de evaluare \u00eentr-un serviciu online, pentru aceasta a fost necesar\u0103 \u00een\u021belegerea arhitecturii. Au fost stabilite urm\u0103toarele cerin\u021be de baz\u0103:<\/p>\n

    <\/p>\n

      \n
    1. Un depozit unic de loguri - toate serviciile ar trebui s\u0103 scrie log-urile \u00eentr-un singur loc, care s\u0103 fie u\u0219or de analizat<\/li>\n
    2. Capacitatea de scalare orizontal\u0103 a serviciului de evaluare - ca fiind cel mai probabil Bottleneck<\/li>\n
    3. Fiecare imagine ar trebui s\u0103 aib\u0103 un num\u0103r egal de resurse ale procesorului alocate - pentru a evita anomalii \u00een distribu\u021bia timpului de inferen\u021b\u0103<\/li>\n
    4. Desf\u0103\u0219urare rapid\u0103 (re) a serviciilor individuale, precum \u0219i a stivei \u00een ansamblu<\/li>\n
    5. Posibilitatea de a utiliza, dac\u0103 este necesar, obiecte comune \u00een diferite servicii<\/li>\n<\/ol>\n

      <\/p>\n

      Arhitectur\u0103<\/h2>\n

      <\/p>\n

      Dup\u0103 analiza cerin\u021belor, a devenit evident c\u0103 arhitectura bazat\u0103 pe microservicii se potrive\u0219te aproape perfect.<\/p>\n

      <\/p>\n

      Pentru a sc\u0103pa de durerea de cap suplimentar\u0103, a fost ales API-ul Telegram ca frontend.<\/p>\n

      <\/p>\n

      Mai \u00eent\u00e2i, s\u0103 examin\u0103m diagrama structural\u0103 a arhitecturii finale, apoi vom trece la descrierea fiec\u0103rui component \u0219i vom formaliza procesul de prelucrare reu\u0219it\u0103 a imaginii.<\/p>\n

      \n\"Prezentare<\/p>\n

      Diagrama structural\u0103 a arhitecturii finale<\/i><\/p>\n

      <\/p>\n

      S\u0103 discut\u0103m mai \u00een detaliu despre fiecare dintre componentele diagramei, s\u0103 le subliniem responsabilitatea unic\u0103 \u00een procesul de evaluare a imaginii.<\/p>\n

      <\/p>\n

      Microserviciul \u201eattrai-telegram-bot\u201d<\/h3>\n

      <\/p>\n

      Acest microserviciu \u00eencaseaz\u0103 toate interac\u021biunile cu API-ul Telegram. Putem identifica dou\u0103 scenarii principale \u2013 lucrul cu imaginea utilizatorului \u0219i lucrul cu rezultatul pipeline-ului de evaluare. Vom analiza ambele scenarii \u00een mod general.<\/p>\n

      <\/p>\n

      Atunci c\u00e2nd primim un mesaj de la utilizator cu o imagine:<\/p>\n

      <\/p>\n

        \n
      1. Se efectueaz\u0103 o filtrare, care const\u0103 din urm\u0103toarele verific\u0103ri:\n