На мінулым тыдні мая каманда правяла захапляльнае мерапрыемства ў гатэлі Four Seasons у Х'юстане, штат Тэхас. Яно было прысвечана прадаўжэнню тэндэнцыі развіцця больш цесных адносін паміж удзельнікамі. Гэта была падзея, якая аб'яднала карыстальнікаў, партнёраў і кліентаў. Акрамя гэтага, на мерапрыемстве прысутнічала шмат прадстаўнікоў Hitachi. Пры арганізацыі гэтага прадпрыемства мы ставілі перад сабой дзве мэты:
- Падаграваць цікавасць да працягам даследаванняў новых праблем галіны;
- Праверыць вобласці, у якіх мы ўжо працуем і развіваемся, а таксама іх карэкціроўка на аснове водгукаў карыстальнікаў.
і Мэт Хол () пачалі з абмеркавання стану галіны і розных праблем, звязаных з кіраваннем і апрацоўкай сейсмічных дадзеных. Было даволі натхняльна і, безумоўна, паказальна пачуць, як размяркоўваюцца аб'ёмы інвестыцый паміж здабычай, транспарціроўкай і перапрацоўкай. Зусім нядаўна львіная дзель інвеставання ішла ў здабычу, якая калісьці была каралём па спажываным аб'ёме сродкаў, але паступова інвестыцыі пераходзяць і ў перапрацоўку, і ў транспартаванне. Мэт распавёў аб сваім захапленні літаральным назіраннем геалагічнага развіцця Зямлі з дапамогай сейсмічных дадзеных.
У цэлым, я лічу, што нашае мерапрыемства можна разглядаць як «першы выхад у свет» для прац, якія мы пачалі некалькі гадоў таму. Мы працягнем інфармаваць вас аб розных дасягненнях і поспехах у нашай працы, якая вядзецца гэтым напрамку. Далей, натхнёныя адным выступам Мэта Хола, мы правялі серыю сесій, вынікам якіх стаў вельмі каштоўны абмен досведам.
Перыферыйныя (межавыя) або хмарныя вылічэнні?
На адной з сесій Даг і Раві (Hitachi Research у Санта-Клары) правялі дыскусію аб тым, як перанесці некаторую частку аналітыкі ў перыферыйныя вылічэнні для хутчэйшага і дакладнага прыняцця рашэнняў. Для гэтага ёсць шмат прычын, і я думаю, што тры найбольш значныя з іх - гэта вузкія каналы перадачы дадзеных, вялікія аб'ёмы дадзеных (як па хуткасці паступлення, аб'ёме і разнастайнасці), і жорсткія графікі прыняцця рашэнняў. Нягледзячы на тое, што некаторыя працэсы (асабліва геалагічныя) могуць заняць тыдні, месяцы ці гады, каб завяршыцца, усё ж у гэтай галіне нямала выпадкаў калі тэрміновасць мае асаблівае значэнне. У такім выпадку немагчымасць доступу да цэнтралізаванага воблака можа мець катастрафічныя наступствы! У прыватнасці, пытанні, якія тычацца АЗТАС (здароўе, бяспека і навакольнае асяроддзе), а таксама пытанні, звязаныя са здабычай нафты і газу, патрабуюць хуткага аналізу і прыняцця рашэнняў. Магчыма, лепшы спосаб - паказаць гэта на прыкладзе розных лікаў - канкрэтныя дэталі няхай застануцца ананімнымі, каб "абараніць нявінных".
- Бесправадныя сеткі апошняй мілі мадэрнізуюцца ў такіх месцах, як Пермскі басейн, з пераходам каналаў са спадарожніка (дзе хуткасць вымяралася ў кбіт/з) на 10 Мбіт/з канал з выкарыстаннем 4G/LTE ці неліцэнзійнага дыяпазону частот. Нават гэтыя мадэрнізаваныя сеткі могуць не спраўляцца пры сутыкненні з тэрабайтамі і петабайтамі дадзеных на мяжы.
- Сэнсарныя сістэмы ад такіх кампаній, як FOTECH, якія аб'ядноўваюцца са мноствам іншых як новых, так і даўно якія працуюць сэнсарных платформаў, здольныя вырабляць некалькі тэрабайт у дзень. Дадатковыя лічбавыя камеры, якія ўсталёўваюць для назіраннем за бяспекай і абароны ад крадзяжу таксама генеруюць вялікі аб'ём дадзеных, а гэта азначае, што на мяжы фармуецца поўны набор катэгорый вялікіх дадзеных (аб'ём, хуткасць паступлення і разнастайнасць).
- У выпадку сістэм сейсмавыведкі, якія выкарыстоўваюцца для збору дадзеных, праекты ўключаюць «канвергентныя» сістэмы, змешчаныя ў кантэйнеры ISO, для збору і перафарматавання сейсмічных дадзеных патэнцыйна да маштабу 10 петабайт дадзеных. З-за выдаленых месцазнаходжання, у якіх працуюць гэтыя сістэмы разведкі, існуе сур'ёзны недахоп прапускной здольнасці для перамяшчэння дадзеных ад мяжы апошняй мілі да цэнтра апрацоўкі дадзеных па сетках. Таму сэрвісныя кампаніі ў літаральным сэнсе адпраўляюць дадзеныя ад мяжы да цэнтра апрацоўкі дадзеных на істужачных, аптычных ці трывалых магнітных запамінальных прыладах.
- Аператары браўнфілд (brownfield) заводаў, дзе штодня адбываюцца тысячы падзей і дзясяткі "чырвоных аварыйных сігналаў", жадаюць працаваць больш аптымальна і стабільна. Аднак сеткі з нізкай хуткасцю перадачы дадзеных і практычна поўная адсутнасць сховішчаў для збору дадзеных для аналізу на заводах дазваляюць меркаваць, што перад пачаткам базавага аналізу бягучых аперацый патрабуецца нешта больш фундаментальнае.
Гэта, безумоўна, прымушае мяне думаць аб тым, што ў той час як пастаўшчыкі агульнадаступных хмарных сістэм спрабуюць перанесці ўсе гэтыя дадзеныя на свае платформы, існуе суровая рэальнасць, з якой трэба спрабаваць зладзіцца. Магчыма, лепшы спосаб класіфікаваць гэтую праблему - гэта спрабаваць прапіхнуць слана праз саломінку! Тым не менш, многія з добрых якасцяў аблокі проста неабходныя. Дык што мы можам зрабіць?
Пераход да перыферыйных хмарных сістэм
Зразумела, на рынку Hitachi ужо ёсць (галіновыя) аптымізаваныя рашэнні, якія ўзбагачаюць дадзеныя на мяжы, аналізуюць іх і сціскаюць да мінімальнага карыснага аб'ёму дадзеных, а таксама даюць бізнес-кансультатыўныя сістэмы, здольныя палепшыць працэсы, звязаныя з перыферыйнымі вылічэннямі. Тым не менш, мая выснова, зробленая на мінулым тыдні, складаецца ў тым, што рашэнні гэтых складаных праблем дакранаюцца не гэтулькі фішкі, які вы выводзьце на стол, колькі падыходу да рашэння праблемы. Гэта сапраўды дух платформы Lumada ад Hitachi Insight Group, паколькі яна складаецца з метады для прыцягнення карыстачоў, экасістэм і, пры неабходнасці, падае прылады для абмеркавання. Я быў вельмі шчаслівы вярнуцца да рашэння праблем (а не да продажу прадуктаў), таму што Мэт Хол сказаў: "Я быў рады бачыць, што супрацоўнікі кампаніі Hitachi пачалі правільна разумець маштабы праблемы", калі мы закрывалі наш саміт.
Дык можа O&G (нафтагазавая прамысловасць) выступіць жывым прыкладам які паказвае неабходнасць укаранення перыферыйных вылічэнняў? Выглядае, што, улічваючы праблемы, выяўленыя падчас нашага саміту, а таксама іншыя галіновыя ўзаемадзеянні, верагодны адказ – так. Магчыма, прычына гэтага такая зразумелая, таму што перыферыйныя вылічэнні, мэтавая пабудова для галіны і змешванне шаблонаў хмарнага праектавання відавочныя па меры мадэрнізацыі стэкаў. Я лічу, што ў дадзеным выпадку пытанне "як" заслугоўвае ўвагі. Выкарыстоўваючы цытату Мэта з апошняга абзаца, мы разумеем, як падштурхнуць прынцып хмарных вылічэнняў да перыферыйных вылічэнняў. Па сутнасці, для гэтай галіны мы павінны праводзіць "старамодныя", а часам і асабістыя кантакты з людзьмі, якія ўдзельнічаюць у розных частках экасістэмы нафтагазавай прамысловасці, такіх як геолагі, інжынеры па свідраванні, геафізікі і гэтак далей. З улікам гэтых узаемадзеянняў, якія неабходна вырашыць, іх маштабы і глыбіня становяцца больш відавочнымі і нават пераканаўчымі. Тады, калі мы складзем планы выканання і ўвасобім іх у жыццё, мы вырашым пабудаваць перыферыйныя хмарныя сістэмы. Аднак, калі мы сядзім у цэнтры, проста чытаем і прадстаўляем гэтыя праблемы, у нас не будзе дастаткова разумення і спагады, каб сапраўды зрабіць усё магчымае. Такім чынам, яшчэ раз, так, нафта і газ спародзяць перыферыйныя хмарныя сістэмы, але менавіта разуменне рэальных патрэб карыстальнікаў на месцах дапаможа нам вызначыць, якія праблемы маюць першараднае значэнне.
Крыніца: habr.com