Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Салом ба ҳама! Бо ин мақола, AERODISK блогеро дар Habré мекушояд. Вой, рафикон!

Мақолаҳои қаблӣ дар бораи Ҳабре саволҳоро дар бораи меъморӣ ва конфигуратсияи асосии системаҳои нигоҳдорӣ баррасӣ карданд. Дар ин мақола мо саволеро баррасӣ хоҳем кард, ки қаблан баррасӣ нашуда буд, аммо аксар вақт дода мешавад - дар бораи таҳаммулпазирии хатогиҳои системаҳои нигаҳдории AERODISK ENGINE. Дастаи мо ҳама корро мекунад, то системаи нигаҳдории AERODISK кор накунад, яъне. шикастан.

Ҳамин тавр шуд, ки мақолаҳо дар бораи таърихи ширкати мо, дар бораи маҳсулоти мо, инчунин намунаи татбиқи бомуваффақият аллакай дар Ҳабре овезон шудаанд. Ташаккури зиёд ба шарикони мо - ширкатҳои TS Solution ва Softline.

Аз ин рӯ, ман дар ин ҷо малакаҳои идоракунии нусхабардорӣ ва часбонро намеомӯзам, балки танҳо истинодҳоро ба нусхаҳои аслии ин мақолаҳо пешкаш мекунам:

Ман ҳам мехоҳам як хабари хушро мубодила кунам. Аммо ман, албатта, аз мушкилот оғоз мекунам. Мо, ҳамчун як фурӯшандаи ҷавон, дар баробари хароҷоти дигар, ҳамеша бо он дучор мешавем, ки бисёр муҳандисон ва маъмурон чӣ гуна дуруст кор кардани системаи нигаҳдории моро намедонанд.
Равшан аст, ки идоракунии аксари системаҳои нигоҳдорӣ аз нуқтаи назари мудир тақрибан якхела аст, аммо ҳар як истеҳсолкунанда хусусиятҳои худро дорад. Ва мо дар ин ҷо истисно нестем.

Аз ин рӯ, бо мақсади содда кардани вазифаи тайёр кардани мутахассисони соҳаи технологияҳои иттилоотӣ, мо тасмим гирифтем, ки соли равонро ба таҳсили ройгон бахшем. Барои ин, дар бисёр шаҳрҳои бузурги Русия мо шабакаи марказҳои салоҳиятдори AERODISK кушода истодаем, ки дар он ҳар як мутахассиси техникии ҳавасманд метавонад комилан ройгон курс гузаронад ва сертификати идоракунии системаҳои нигаҳдории AERODISK ENGINE гирад.

Дар ҳар як маркази салоҳият мо як стенди мукаммали намоишӣ аз системаи нигаҳдории AERODISK ва сервери физикӣ насб мекунем, ки дар он муаллими мо омӯзиши рӯ ба рӯ мегузаронад. Мо ҷадвали кори марказҳои салоҳиятдорро баъди пайдо шудани онҳо нашр хоҳем кард, вале мо аллакай дар Нижний Новгород марказ кушодаем ва дар навбатӣ шаҳри Краснодар қарор дорад. Шумо метавонед бо истифода аз истинодҳои дар поён буда барои омӯзиш обуна шавед. Ин аст маълумоти ҳоло маълум дар бораи шаҳрҳо ва санаҳо:

  • Низоми Novgorod (АЛЛАКАЙ КУШОДА - шумо метавонед дар ин ҷо сабти ном кунед https://aerodisk.promo/nn/);
    То 16 апрели соли 2019 шумо метавонед дар вақти дилхоҳи корӣ ба марказ ташриф оред ва 16 апрели соли 2019 курси калони омӯзишӣ ташкил карда мешавад.
  • Краснодар (ЗУД КУШОДА АСТ - шумо метавонед дар ин ҷо сабти ном кунед https://aerodisk.promo/krsnd/ );
    Аз 9-уми апрел то 25-уми апрели соли 2019 метавонед дар вақти дилхоҳи корӣ ба марказ ташриф оред ва 25-уми апрели соли 2019 курси калони омӯзишӣ ташкил карда мешавад.
  • Екатеринбург (ЗУД КУШОДА ШУДААСТ, маълумотро дар вебсайти мо ё Habré пайгирӣ кунед);
    Май-июни 2019.
  • Новосибирск (ба маълумот дар вебсайти мо ё Habré пайравӣ кунед);
    Октябри 2019.
  • Красноярск (ба маълумот дар вебсайти мо ё Habré пайравӣ кунед);
    Ноябри 2019

Ва, албатта, агар Маскав аз шумо дур набошад, шумо метавонед дар вақти дилхоҳ ба идораи мо дар Маскав ташриф оваред ва аз ин гуна омӯзишҳо гузаред.

Ҳама. Мо бо маркетинг тамом шудем, биёед ба технология мегузарем!

Дар Habré мо мунтазам мақолаҳои техникӣ дар бораи маҳсулоти худ, санҷишҳои сарборӣ, муқоисаҳо, хусусиятҳои истифода ва татбиқи ҷолибро нашр хоҳем кард.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

ДИҚҚАТ! Пас аз хондани мақола шумо метавонед бигӯед: хуб, албатта, фурӯшанда худро тафтиш мекунад, то ҳама чиз "бо як таркиш" кор кунад, шароити гармхона ва ғайра. Ман ҷавоб медиҳам: чизе монанди ин! Баръакси рақибони хориҷиамон, мо дар ин ҷо, дар наздикии шумо ҷойгирем ва шумо метавонед ҳамеша ба мо (дар Маскав ё дар ягон Кумитаи марказӣ) биёед ва системаи нигаҳдории моро бо ҳар роҳ санҷед. Ҳамин тариқ, барои мо мувофиқ кардани натиҷаҳо ба тасвири идеалии ҷаҳон чандон маъно надорад, зеро Моро тафтиш кардан хеле осон аст. Барои онҳое, ки барои рафтан танбал ҳастанд ва вақт надоранд, мо метавонем санҷиши фосилавӣ ташкил кунем. Барои ин мо лабораторияи махсус дорем. Бо мо тамос гиред.

АЧТУНГ-2! Ин санҷиш як санҷиши сарборӣ нест, зеро Дар ин ҷо мо танҳо дар бораи таҳаммулпазирӣ ба хатогиҳо аҳамият медиҳем. Дар тӯли якчанд ҳафта, мо стенди пурқувваттар омода мекунем ва санҷиши сарбории системаи нигаҳдорӣ мегузаронем ва натиҷаҳоро дар ин ҷо нашр мекунем (дар омади гап, дархостҳо барои санҷишҳо қабул карда мешаванд).

Пас, биёед онро вайрон кунем.

Пойгоҳи санҷишӣ

Стенди мо аз таҷҳизоти зерин иборат аст:

  • 1 x системаи нигаҳдории Aerodisk Engine N2 (2 контроллер, кэш 64 ГБ, портҳои 8xFC 8 Гб/с, 4xEthernet 10 Гб/с SFP+, 4 портҳои xEthernet 1 Гб/с); Дар системаи нигоҳдорӣ дискҳои зерин насб карда шудаанд:
  • 4 x дискҳои SAS SSD 900 ГБ;
  • 12 x дискҳои SAS 10k 1,2 TB;
  • 1 x сервери физикӣ бо Windows Server 2016 (2xXeon E5 2667 v3, 96 ГБ RAM, 2xFC 8Gb/s, 2xEthernet 10Gb/s SFP+);
  • 2 x Калиди SAN 8G;
  • 2 x Калиди LAN 10G;

Мо серверро ба системаи нигаҳдорӣ тавассути коммутаторҳо тавассути ҳам FC ва ҳам 10G Ethernet пайваст кардем. Диаграммаи стенд дар зер оварда шудааст.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Унсурҳое, ки ба мо лозиманд, ба монанди MPIO ва iSCSI ташаббускор, дар Windows Server насб карда шудаанд.
Минтақаҳо дар коммутаторҳои FC танзим карда шудаанд, VLANҳои мувофиқ дар коммутаторҳои LAN танзим карда шудаанд ва MTU 9000 дар портҳои нигаҳдорӣ, коммутаторҳо ва ҳост насб карда шудаанд (чӣ гуна иҷрои ин ҳама дар ҳуҷҷатҳои мо тавсиф шудааст, бинобар ин мо тавсиф намекунем. ин раванд дар ин ҷо).

Методологияи санҷиш

Нақшаи санҷиши садама чунин аст:

  • Санҷиши нокомии бандарҳои FC ва Ethernet.
  • Санҷиши нокомии барқ.
  • Санҷиши нокомии контроллер.
  • Санҷиши нокомии диск дар гурӯҳ/ҳавз.

Ҳама санҷишҳо дар шароити сарбории синтетикӣ анҷом дода мешаванд, ки мо онро барномаи IOMETER тавлид мекунем. Дар баробари ин, мо ҳамон санҷишҳоро анҷом медиҳем, аммо дар шароити нусхабардории файлҳои калон ба системаи нигоҳдорӣ.

Конфигуратсияи IOmeter чунин аст:

  • Хондан/навиштан - 70/30
  • Блок - 128к (мо тасмим гирифтем, ки системаҳои нигоҳдорӣ дар блокҳои калон шуста шаванд)
  • Шумораи риштаҳо - 128 (ки ба бори истеҳсолӣ хеле монанд аст)
  • Тасодуфӣ пурра
  • Шумораи коргарон - 4 (2 барои FC, 2 барои iSCSI)

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват
Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Тест ҳадафҳои зеринро дорад:

  1. Боварӣ ҳосил кунед, ки раванди боркунӣ ва нусхабардории синтетикӣ дар сенарияҳои гуногуни нокомӣ халал нарасонад ё боиси хатогиҳо шавад.
  2. Боварӣ ҳосил кунед, ки раванди иваз кардани портҳо, контроллерҳо ва ғайра ба қадри кофӣ автоматӣ карда шудааст ва дар ҳолати нокомӣ амалҳои администраторро талаб намекунад (яъне ҳангоми хатогиҳо, мо албатта дар бораи хатогиҳо сухан намегӯем).
  3. Боварӣ ҳосил кунед, ки маълумот дар гузоришҳо дуруст нишон дода мешавад.

Омода кардани мизбон ва системаи нигоҳдорӣ

Мо дастрасии блокро дар системаи нигаҳдорӣ бо истифода аз бандарҳои FC ва Ethernet танзим кардем (мутаносибан FC ва iSCSI). Бачаҳо аз TS Solution ба таври муфассал дар мақолаи қаблӣ чӣ гуна ин корро кардан мумкин аст (https://habr.com/ru/company/tssolution/blog/432876/). Ва албатта, касе дастуру курсҳоро бекор накардааст.

Мо бо истифода аз тамоми дискҳои дар дастамон як гурӯҳи гибридӣ таъсис додем. 2 дискҳои SSD ба кэш илова карда шуданд, 2 дискҳои SSD ҳамчун сатҳи иловагии нигоҳдорӣ (онлайн-сатҳ) илова карда шуданд. Мо 12 диски SAS10k-ро ба RAID-60P (паритети сегона) гурӯҳбандӣ кардем, то нокомии се дискро дар гурӯҳ якбора тафтиш кунем. Як диск барои ивазкунии худкор монд.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Мо ду LUN-ро пайваст кардем (яке аз тариқи FC, дигаре тавассути iSCSI).

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Соҳиби ҳарду LUN контролери Engine-0 мебошад

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Биёед санҷишро оғоз кунем

Мо IOMETER-ро бо конфигуратсияи боло фаъол мекунем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Мо интиқоли 1.8 ГБ/с ва таъхири 3 миллисонияро сабт мекунем. Ҳеҷ гуна хатогӣ вуҷуд надорад (Миқдори умумии хатоҳо).

Ҳамзамон, аз диски маҳаллии "C"-и мизбони мо, мо ба таври баробар нусхабардории ду файли бузурги 100 ГБ ба LUN-ҳои нигаҳдории FC ва iSCSI (дискҳои E ва G дар Windows) бо истифода аз интерфейсҳои дигар оғоз мекунем.

Дар боло раванди нусхабардорӣ ба LUN FC, дар зер ба iSCSI оварда шудааст.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Санҷиши №1: Хомӯш кардани портҳои I/O

Мо ба системаи нигоҳдорӣ аз қафо наздик мешавем))) ва бо як ҳаракати каме даст мо ҳама кабелҳои FC ва Ethernet 10G-ро аз контроллери Engine-0 берун мекунем. Чунин аст, ки гӯё як зани фаррош бо швабра гузашта, қарор кард, ки фаршро дар ҳамон ҷое, ки snot хобида буд ва ноқилҳо хобидаанд, бишӯяд (яъне контроллер ҳоло ҳам кор мекунад, аммо портҳои вуруд ва баромад мурдаанд).

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Биёед IOMETER ва нусхабардории файлҳоро бубинем. Гузариш ба 0,5 ГБ/с коҳиш ёфт, аммо зуд ба сатҳи қаблии худ баргашт (тақрибан дар 4-5 сония). Ҳеҷ гуна хатогӣ вуҷуд надорад.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Нусхабардории файлҳо қатъ нашудааст, суръат паст мешавад, аммо он тамоман муҳим нест (аз 840 МБ/с ба 720 МБ/с паст шуд). Нусхабардорӣ қатъ нашудааст.

Мо ба гузоришҳои системаи нигоҳдорӣ назар мекунем ва паёмеро дар бораи мавҷуд набудани портҳо ва кӯчонидани автоматии гурӯҳ мебинем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Панели иттилоотӣ инчунин ба мо мегӯяд, ки ҳама чиз бо бандарҳои FC чандон хуб нест.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Системаи нигоҳдорӣ аз нокомии портҳои I/O наҷот ёфт бомуваффакият.

Санҷиши № 2. Хомӯш кардани контролери нигаҳдорӣ

Қариб дарҳол (пас аз васл кардани кабелҳо ба системаи нигоҳдорӣ) мо тасмим гирифтем, ки системаи нигоҳдорӣ тавассути кашидани контроллер аз шасси ба анҷом расад.

Мо боз ба системаи нигаҳдорӣ аз пас наздик мешавем (ба мо писанд омад))) ва ин дафъа мо контроллери Engine-1-ро, ки дар айни замон соҳиби РДГ мебошад (гурӯҳ ба он ҷо гузаштааст) берун мебарорем.

Вазъият дар IOmeter чунин аст. I/O тақрибан 5 сония қатъ шуд. Хатогиҳо ҷамъ намешаванд.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Пас аз 5 сония, воридот / баромад бо тақрибан ҳамон гузарвожа, аммо бо таъхирҳои 35 миллисония дубора оғоз шуд (таҳқирҳо пас аз чанд дақиқа ислоҳ карда мешаванд). Тавре ки аз скриншотҳо дида мешавад, арзиши умумии ҳисобкунии хато 0 аст, яъне хатогиҳои навиштан ё хондан вуҷуд надоштанд.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Биёед нусхабардории файлҳои худро бубинем. Тавре ки шумо мебинед, он қатъ нашуд, каме пастшавии кор ба амал омад, аммо дар маҷмӯъ ҳама чиз ба ҳамон ~ 800 МБ/с баргашт.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Мо ба системаи нигоҳдорӣ меравем ва дар панели иттилоот лаънатро мебинем, ки контролери Engine-1 дастнорас аст (албатта, мо онро куштем).

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Мо дар гузоришҳо низ чунин сабтро мебинем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Назоратчии нигаҳдорӣ низ аз нокомӣ наҷот ёфт бомуваффакият.

Санҷиши № 3: Хомӯш кардани қувваи барқ.

Ба ҳар ҳол, мо дубора нусхабардории файлҳоро оғоз кардем, аммо IOMETER-ро қатъ накардем.
Мо агрегати таъминоти барқро мекашем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Ба системаи нигаҳдорӣ дар панели иттилоот огоҳии дигар илова карда шуд.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Инчунин дар менюи сенсорҳо мо мебинем, ки сенсорҳои марбут ба таъмини қувваи барқ ​​сурх шудаанд.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Системаи нигаҳдорӣ корашро идома медиҳад. Нокомии воҳиди таъмини барқ ​​ба ҳеҷ ваҷҳ ба кори системаи нигоҳдорӣ таъсир намерасонад; аз нуқтаи назари мизбон, суръати нусхабардорӣ ва нишондиҳандаҳои IOMETER бетағйир монданд.

Санҷиши нокомии барқ ​​гузашт бомуваффакият.

Пеш аз санҷиши ниҳоӣ, мо тасмим гирифтем, ки системаи нигаҳдории худро каме ба ҳаёт баргардонем, контроллер ва воҳиди таъминоти барқро баргардонем ва инчунин кабелҳоро ба тартиб дарорем, ки системаи нигоҳдорӣ дар бораи он бо нишонҳои сабз дар панели саломатии худ ба мо хабар дод. .

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Санҷиши № 4. Нокомии се диск дар як гурӯҳ

Пеш аз ин санҷиш мо як қадами иловагии омодагӣ анҷом додем. Гап дар он аст, ки системаи нигаҳдории ENGINE як чизи хеле муфидро таъмин мекунад - сиёсатҳои гуногуни барқарорсозӣ. TS Solution қаблан дар бораи ин хусусият навишта буд, аммо биёед моҳияти онро ба ёд орем. Мудири нигаҳдорӣ метавонад афзалияти тақсимоти захираҳоро ҳангоми барқарорсозӣ муайян кунад. Ё дар самти иҷрои I/O, яъне барқарорсозӣ дертар мегирад, аммо ҳеҷ гуна коҳиши иҷроиш вуҷуд надорад. Ё ба самти суръати азнавсозй, вале хосилнокии мехнат паст мешавад. Ё варианти мутавозин. Азбаски иҷрои нигаҳдорӣ ҳангоми барқарорсозии гурӯҳи дискҳо ҳамеша дарди сари администратор аст, мо сиёсатро бо ғаразнокӣ нисбат ба иҷрои вуруд / баромад ва аз ҳисоби суръати барқарорсозӣ озмоиш хоҳем кард.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Акнун биёед нокомии дискро тафтиш кунем. Мо инчунин сабтро ба LUNs (файлҳо ва IOMETER) имкон медиҳем. Азбаски мо як гурӯҳ бо паритети сегона (RAID-60P) дорем, ин маънои онро дорад, ки система бояд ба шикасти се диск тоб оварад ва пас аз нокомӣ, ивазкунии худкор бояд кор кунад, як диск бояд ҷои яке аз дискҳои нокомро гирад. дар РДГ ва бозсозй бояд аз он cap шавад.

Оғоз. Аввалан, тавассути интерфейси нигоҳдорӣ, биёед дискҳоеро, ки мо мехоҳем берун оварем, таъкид кунем (то он ки диски автоматикиро аз даст надиҳем ва кашем).

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Мо нишондодро дар сахтафзор тафтиш мекунем. Ҳама чиз хуб аст, мо се диски таъкидшударо мебинем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Ва мо ин се дискро мекашем.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Биёед бубинем, ки дар мизбон чӣ аст. Ва дар он ҷо ... ҳеҷ чизи махсусе рӯй надодааст.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват
Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Нишондиҳандаҳои нусхабардорӣ (онҳо нисбат ба аввал баландтаранд, зеро кэш гарм шудааст) ва IOMETER ҳангоми хориҷ кардани дискҳо ва оғоз кардани барқарорсозӣ (дар ҳудуди 5-10%) чандон тағир намеёбанд.

Биёед бубинем, ки дар системаи нигоҳдорӣ чӣ мавҷуд аст.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Дар макоми гурУх мо мебинем, ки процесси бозсозй огоз ёфта, дар арафаи анчомёбист.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Дар скелети РДГ шумо мебинед, ки 2 диск дар ҳолати сурх қарор доранд ва яке аллакай иваз карда шудааст. Диски худкор ивазкунанда дигар нест; он диски 3-юми нокомро иваз кард. Барқарорсозӣ чанд дақиқа тӯл кашид, навиштани файлҳо ҳангоми аз кор баромадани 3 диск қатъ нашуд ва иҷрои вуруд/баҳо чандон тағир наёфт.

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Санҷишҳои садамаҳои системаи нигаҳдории AERODISK ENGINE N2, санҷиши қувват

Санҷиши нокомии диск бешубҳа гузашт бомуваффакият.

хулоса

Дар ин лаҳза мо тасмим гирифтем, ки зӯроварӣ нисбат ба системаҳои нигоҳдорӣ қатъ карда шавад. Биёед ҷамъбаст кунем:

  • Санҷиши нокомии порти FC - муваффақ
  • Санҷиши нокомии порти Ethernet - муваффақ
  • Санҷиши нокомии контроллер - муваффақ
  • Санҷиши нокомии барқ ​​- Бомуваффақият
  • Санҷиши нокомии диск дар grouppool - бомуваффақият

Ҳеҷ яке аз нокомиҳо сабтро қатъ накарданд ё боиси хатогиҳо дар сарбории синтетикӣ шуданд; Албатта, як зарбаи иҷроиш буд (ва мо медонем, ки чӣ тавр онро бартараф кунем, ки мо ба зудӣ мекунем), аммо бо назардошти он, ки ин сонияҳо ҳастанд, ин комилан қобили қабул аст. Хулоса: таҳаммулпазирии хатогиҳои ҳамаи ҷузъҳои системаи нигаҳдории AERODISK дар сатҳ кор мекард, ягон нуқтаи нокомӣ вуҷуд надошт.

Аён аст, ки дар як мақола мо ҳамаи сенарияҳои нокомиро санҷида наметавонем, аммо мо кӯшиш кардем, ки маъмултаринро фаро гирем. Аз ин рӯ, лутфан фикру мулоҳизаҳо, пешниҳодҳои худро барои нашрияҳои оянда ва албатта интиқоди муносиб фиристед. Мо бо хурсандӣ муҳокима хоҳем кард (ё беҳтараш, ба тренинг биёед, ман ҷадвалро такрор мекунам)! То озмоишҳои нав!

  • Низоми Novgorod (АЛЛАКАЙ КУШОДА - шумо метавонед дар ин ҷо сабти ном кунед https://aerodisk.promo/nn/);
    То 16 апрели соли 2019 шумо метавонед дар вақти дилхоҳи корӣ ба марказ ташриф оред ва 16 апрели соли 2019 курси калони омӯзишӣ ташкил карда мешавад.
  • Краснодар (ЗУД КУШОДА АСТ - шумо метавонед дар ин ҷо сабти ном кунед https://aerodisk.promo/krsnd/ );
    Аз 9-уми апрел то 25-уми апрели соли 2019 метавонед дар вақти дилхоҳи корӣ ба марказ ташриф оред ва 25-уми апрели соли 2019 курси калони омӯзишӣ ташкил карда мешавад.
  • Екатеринбург (ЗУД КУШОДА ШУДААСТ, маълумотро дар вебсайти мо ё Habré пайгирӣ кунед);
    Май-июни 2019.
  • Новосибирск (ба маълумот дар вебсайти мо ё Habré пайравӣ кунед);
    Октябри 2019.
  • Красноярск (ба маълумот дар вебсайти мо ё Habré пайравӣ кунед);
    Ноябри 2019

Манбаъ: will.com

Илова Эзоҳ