Ang usa ka napakyas nga IT infrastructure migration miresulta sa korapsyon sa 1,3 bilyon nga bank customer records. Kining tanan tungod sa dili igo nga pagsulay ug usa ka walay hinungdan nga kinaiya sa mga komplikadong sistema sa IT. Gisulti sa Cloud4Y kung giunsa kini nahitabo.
Sa 2018 English nakaamgo nga ang iyang dos anyos nga "diborsyo" sa Lloyds banking group (ang duha ka kompanya naghiusa niadtong 1995) mahal kaayo. Ang TSB gihigot gihapon sa kanhing kauban niini pinaagi sa dali nga pag-clone sa Lloyds IT systems. Labaw sa tanan, ang bangko kinahanglang mobayad ug “alimony,” usa ka $127 milyones nga tinuig nga bayad sa paglilisensya.
Pipila ka mga tawo ang gusto nga magbayad salapi sa ilang mga ex, mao nga kaniadtong Abril 22, 2018 sa 18:00 TSB nagsugod ang katapusan nga yugto sa usa ka 18 ka bulan nga plano nga kinahanglan nga magbag-o sa tanan. Giplanohan nga ibalhin ang binilyon nga mga rekord sa kostumer sa sistema sa IT sa kompanya sa Espanya nga Banco Sabadell, nga nagpalit sa TSB sa $2,2 bilyon kaniadtong 2015.
Ang CEO sa Banco Sabadell nga si José Olu misulti mahitungod sa umaabot nga panghitabo 2 ka semana sa wala pa ang Pasko 2017 atol sa usa ka festive staff meeting sa usa ka prestihiyosong conference hall sa Barcelona. Ang labing importante nga galamiton sa paglalin mao ang usa ka bag-ong bersyon sa sistema nga gimugna sa Banco Sabadell: Proteo. Giilisan pa gani kini og Proteo4UK ilabi na alang sa proyekto sa paglalin sa TSB.
Sa presentasyon sa Proteo4UK, ang executive director sa Banco Sabadell nga si Jaime Guardiola Romojaro nanghambog nga ang bag-ong sistema usa ka dako nga proyekto nga walay mga analogue sa Europe, diin kapin sa 1000 ka mga espesyalista ang nagtrabaho. Ug nga ang pagpatuman niini maghatag usa ka hinungdanon nga pagpauswag sa pagtubo sa Banco Sabadell sa UK.
Ang Abril 22, 2018 gitakda nga adlaw sa paglalin. Hilum kadto nga Domingo sa gabii sa tunga-tunga sa tingpamulak. Ang mga sistema sa IT sa bangko nahulog samtang ang mga rekord gibalhin gikan sa usa ka sistema ngadto sa lain. Uban sa publiko nga pag-access sa mga bank account nga gipahiuli sa ulahing bahin sa Domingo, ang usa magdahum nga ang bangko sa hinay ug hapsay nga pagbalik sa serbisyo.
Apan samtang si Olyu ug Guardiola Romojaro malipayong nagsibya gikan sa entablado mahitungod sa pagpatuman sa proyekto sa Proteo4UK, ang mga empleyado nga responsable sa proseso sa paglalin nakulbaan kaayo. Ang proyekto, nga milungtad og 18 ka bulan aron mahuman, grabe nga naatras sa iskedyul ug sobra sa badyet. Wala'y panahon sa paghimo og dugang nga mga pagsulay. Apan ang pagbalhin sa tanan nga datos sa kompanya (nga, hinumdomi, binilyon nga mga rekord) sa lain nga sistema usa ka Herculean nga buluhaton.
Migawas nga gikulbaan ang mga engineer tungod sa maayong rason.
Usa ka stub sa site nga nakita sa mga kustomer sa dugay nga panahon
20 minutos human giablihan sa TSB ang access sa mga account, kay bug-os nga masaligon nga ang paglalin hapsay, ang unang mga taho sa mga problema miabut.
Ang mga tinigom sa mga tawo kalit nga nawala sa ilang mga account. Ang mga pagpalit sa gamay nga kantidad nasayop nga natala isip multi-thousand-dollar expenses. Ang ubang mga tawo nag-log in sa ilang personal nga mga account ug wala makakita sa ilang mga bank account, apan ang mga account sa hingpit nga lahi nga mga tawo.
Sa 21:00, gipahibalo sa mga representante sa TSB ang lokal nga regulator sa pinansya (ang UK Financial Conduct Authority, FCA) nga ang bangko adunay problema. Apan ang FCA nakamatikod na: Ang TSB nadaot pag-ayo, ug ang mga kustomer gihimong mga buang. Ug, siyempre, nagsugod sila sa pagreklamo (ug karong panahona, ang paghulog sa pipila ka linya sa Twitter o Facebook dili kaayo lisud). Sa 23:30 p.m., ang FCA gikontak sa laing regulator sa pinansya, ang Prudential Regulation Authority (PRA), nga nakamatikod usab nga adunay sayup.
Human sa tungang gabii nakaagi sila sa usa sa mga representante sa bangko. Ug pangutan-a sila sa bugtong pangutana: "unsa ang impyerno?"
Nagkinahanglan kini og panahon aron masabtan ang gidak-on sa trahedya, apan nahibal-an na nato karon nga 1,3 ka bilyon nga mga rekord sa 5,4 ka milyon nga mga kustomer ang nadaot sa panahon sa paglalin. Sulod sa labing menos usa ka semana, ang mga kliyente dili makadumala sa ilang kuwarta gikan sa ilang mga kompyuter o mobile device. Wala sila makabayad sa utang, ug daghang mga kliyente sa bangko ang nakadawat og depekto sa ilang kasaysayan sa kredito, ingon man usab sa mga ulahing bayranan.
Mao ni ang hitsura sa TSB customer online bank
Sa diha nga ang mga glitches nagsugod sa pagpakita, hapit diha-diha dayon, ang mga representante sa bangko miinsistir nga ang mga problema mao ang "intermittent." Tulo ka adlaw ang milabay, usa ka pahayag ang gipagawas nga ang tanan nga mga sistema normal. Apan ang mga kustomer nagpadayon sa pagreport sa mga problema. Hangtud sa 26 Abril 2018 nga ang punoan nga ehekutibo sa bangko, si Paul Pester, miangkon nga ang TSB "nagluhod" samtang ang imprastraktura sa IT sa bangko nagpadayon nga adunay "isyu sa bandwidth" nga nagpugong sa hapit usa ka milyon nga mga kostumer sa pag-access sa mga serbisyo sa online banking.
Duha ka semana sa paglalin, ang aplikasyon sa online banking gitaho gihapon nga nakasinati mga internal nga sayup nga may kalabutan sa database sa SQL.
Ang mga kalisud sa pagbayad, labi na sa mga bayranan sa negosyo ug pagpautang, nagpadayon hangtod sa upat ka semana. Ug nahibal-an sa ubiquitous nga mga peryodista nga gisalikway sa TSB ang usa ka tanyag nga tabang gikan sa Lloyds Banking Group sa pagsugod sa krisis sa paglalin. Sa kinatibuk-an, ang mga problema nga may kalabutan sa pag-log in sa mga serbisyo sa online ug ang abilidad sa pagbalhin sa salapi naobserbahan hangtod sa Setyembre 3.
Usa ka gamay nga kasaysayan
Ang unang ATM giablihan niadtong 27 Hunyo 1967 duol sa Barclays sa Enfield
Ang mga sistema sa IT sa pagbabangko nahimong labi ka komplikado samtang ang mga panginahanglanon sa kustomer ug gipaabut gikan sa pagtaas sa bangko. Mga 40-60 ka tuig na ang milabay, malipay unta mi nga mobisita sa among lokal nga sanga sa bangko atol sa oras sa negosyo aron magdeposito og kwarta o i-withdraw kini pinaagi sa teller.
Ang kantidad sa kuwarta sa account direktang may kalabotan sa kuwarta ug mga sensilyo nga among gihatag sa bangko. Ang among accounting sa balay mahimong masubay gamit ang pluma ug papel, ug ang mga sistema sa kompyuter dili ma-access sa mga kliyente. Ang mga empleyado sa bangko nagbutang ug datos gikan sa mga passbook ug uban pang media ngadto sa mga himan nga nag-ihap sa kuwarta.
Apan sa 1967 sa amihanang London sa unang higayon usa ka ATM nga wala mahimutang sa lugar sa bangko. Ug kini nga panghitabo nagbag-o sa bangko. Ang kasayon sa tiggamit nahimong sukaranan alang sa pag-uswag sa mga institusyong pinansyal. Ug kini nakatabang sa mga bangko nga mahimong mas sopistikado sa mga termino sa pagtrabaho sa mga kliyente ug sa ilang salapi. Human sa tanan, samtang ang mga sistema sa kompyuter anaa lamang sa mga empleyado sa bangko, sila natagbaw sa daan, "papel" nga paagi sa pagpakig-uban sa mga kliyente. Diha lamang sa pag-abut sa mga ATM ug dayon sa online banking nga ang kinatibuk-ang publiko nakakuha og direktang access sa mga sistema sa IT sa bangko.
Ang mga ATM nagsugod pa lang. Sa wala madugay ang mga tawo nakahimo sa paglikay sa linya sa cash register pinaagi lamang sa pagtawag sa bangko pinaagi sa telepono. Nagkinahanglan kini og mga espesyal nga kard nga gisal-ut ngadto sa usa ka magbabasa nga makahimo sa pag-decipher sa dual-tone multi-frequency (DTMF) nga mga signal nga gipasa sa dihang ang user mipugos sa "1" (pag-withdraw og kwarta) o "2" (deposito nga mga pondo) nga yawe.
Ang Internet ug mobile banking nagpaduol sa mga kostumer sa mga kinauyokan nga sistema nga gigamit sa mga bangko. Bisan pa sa ilang nagkalainlain nga mga limitasyon ug mga setting, ang tanan niini nga mga sistema kinahanglan nga epektibo nga makig-uban sa usag usa ug sa mainframe, paghimo sa mga pagsusi sa balanse sa account, paghimo sa mga pagbalhin sa salapi, ug uban pa.
Pipila ka mga kliyente ang naghunahuna kung unsa ka komplikado ang agianan sa impormasyon kung ikaw, pananglitan, nag-log in sa usa ka online nga bangko aron makita o i-update ang kasayuran bahin sa kuwarta sa imong account. Kung nag-log in ka, kini nga datos gipasa sa usa ka set sa mga server; kung maghimo ka usa ka transaksyon, gi-duplicate sa sistema kini nga data sa imprastraktura sa backend, nga dayon naghimo sa bug-at nga pag-alsa-pagbalhin sa salapi gikan sa usa ka account ngadto sa lain aron magbayad mga bayranan, pagbayad, ug pagpadayon sa mga suskrisyon.
Karon padaghanon kini nga proseso sa pipila ka bilyon. Sumala sa datos nga nahipos sa World Bank sa tabang sa Bill and Melinda Gates Foundation, ang mga hamtong sa tibuok kalibutan adunay bank account. Ang matag usa niini nga mga tawo adunay mga bayronon nga bayranan. Adunay nagbayad sa usa ka utang o nagbalhin salapi alang sa mga club sa mga bata, adunay nagbayad alang sa usa ka suskrisyon sa Netflix o nag-abang sa usa ka cloud server. Ug kining tanan nga mga tawo naggamit ug labaw sa usa ka bangko.
Daghang internal nga sistema sa IT sa usa ka bangko (mobile banking, ATM, ug uban pa) kinahanglan dili lang makig-uban sa usag usa. Kinahanglan silang makig-uban sa ubang mga sistema sa pagbabangko sa Brazil, China, ug Germany. Ang usa ka French ATM kinahanglan nga makahatag ug kuwarta nga naa sa bank card nga gi-isyu sa usa ka lugar sa Bolivia.
Ang kuwarta kanunay nga global, apan wala pa sukad nga ang sistema labi ka komplikado. Ang gidaghanon sa mga paagi sa paggamit sa mga sistema sa IT sa bangko nagkadaghan, apan ang daan nga mga paagi gigamit gihapon. Ang kalampusan sa usa ka bangko nag-agad sa kung unsa ka "mapadayonon" ang imprastraktura sa IT, ug kung unsa ka epektibo ang bangko nga makasagubang sa usa ka kalit nga kapakyasan tungod sa kung diin ang sistema mahimong walay pulos.
Walay mga pagsulay - pag-andam alang sa mga problema
Ang CEO sa Banco de Sabadell nga si Jaime Guardiola (wala) masaligon nga hapsay ang tanan. Wala molampos.
Ang mga sistema sa kompyuter sa TSB dili kaayo maayo sa pagsulbad sa mga problema sa madali. Adunay, siyempre, mga problema sa software, apan sa tinuud ang bangko "nabuak" tungod sa sobra nga pagkakomplikado sa mga sistema sa IT. Sumala sa taho, nga giandam sa unang mga adlaw sa dako nga outage, "ang kombinasyon sa mga bag-ong aplikasyon, dugang nga paggamit sa microservices inubanan sa paggamit sa duha ka Active/Active data centers misangpot sa komplikadong risgo sa produksyon."
Ang ubang mga bangko, sama sa HSBC, nag-operate sa tibuok kalibutan ug busa adunay usab komplikado kaayo, interconnected nga mga sistema. Apan sila regular nga gisulayan, migrate ug updated, sumala sa usa ka HSBC IT manager sa Lancaster. Gitan-aw niya ang HSBC isip usa ka modelo kung giunsa pagdumala sa ubang mga bangko ang ilang mga sistema sa IT: pinaagi sa pagdeboto sa mga kawani ug paggasto sa ilang oras. Apan sa samang higayon giangkon niya nga alang sa usa ka gamay nga bangko, ilabi na sa usa nga walay kasinatian sa paglalin, ang pagbuhat niini sa husto usa ka lisud nga buluhaton.
Lisod ang paglalin sa TSB. Ug, sumala sa mga eksperto, ang mga kawani sa bangko dili makaabot sa kini nga lebel sa pagkakomplikado sa mga termino sa mga kwalipikasyon. Dugang pa, wala sila maghago sa pagsusi sa ilang solusyon o pagsulay sa paglalin daan.
Atol sa usa ka pakigpulong sa Parliament sa Britanya bahin sa mga problema sa bangko, si Andrew Bailey, punoan nga ehekutibo sa FCA, nagpamatuod niini nga pagduda. Ang dili maayo nga code lagmit nagpahinabo lamang sa mga inisyal nga problema sa TSB, apan ang nagkadugtong nga mga sistema sa global nga network sa pinansyal nagpasabut nga ang mga sayup niini nagpadayon ug dili na mabalik. Ang bangko nagpadayon sa pagtan-aw sa wala damha nga mga kasaypanan sa ubang dapit sa IT nga arkitektura niini. Ang mga kustomer nakadawat og mga mensahe nga walay kahulogan o walay kalabotan sa ilang mga problema.
Ang pagsulay sa pagbag-o makatabang sa pagpugong sa katalagman pinaagi sa pagdakop sa dili maayo nga code sa wala pa kini ipagawas sa produksiyon ug hinungdan sa kadaot pinaagi sa paghimo og mga bug nga dili mabalik. Apan ang bangko nakahukom sa pag-agi sa usa ka minahan nga wala gani mahibalo niini. Ang mga sangputanan matagna. Ang laing problema mao ang "pag-optimize" sa mga gasto. Giunsa kini pagpakita sa iyang kaugalingon? Ang kamatuoran mao nga kaniadto nadesisyonan nga wagtangon ang mga backup nga kopya nga gitipigan sa Lloyds, tungod kay sila "nagkaon" sa daghang salapi.
Ang mga bangko sa Britanya (ug uban pa) naningkamot nga makab-ot ang upat ka siyam nga lebel sa pagkaanaa, nga mao, 99,99%. Sa praktis, kini nagpasabut nga ang sistema sa IT kinahanglan nga magamit sa tanan nga oras, nga adunay hangtod sa 52 minuto nga downtime matag tuig. Ang "tulo ka siyam" nga sistema, 99,9%, sa unang pagtan-aw dili kaayo magkalahi. Apan sa tinuod nagpasabot kini nga ang downtime moabot ug 8 ka oras kada tuig. Alang sa bangko, ang "upat ka siyam" maayo, apan ang "tulo ka siyam" dili.
Apan sa matag higayon nga ang usa ka kompanya maghimo mga pagbag-o sa imprastraktura sa IT, kinahanglan kini nga peligro. Human sa tanan, adunay mahimo nga dili maayo. Ang pagkunhod sa mga pagbag-o makatabang sa paglikay sa mga problema, samtang ang gikinahanglan nga mga pagbag-o kinahanglan nga maampingon nga pagsulay. Ug ang mga regulator sa Britanya nagpunting sa ilang pagtagad niini nga punto.
Tingali ang labing kadali nga paagi aron malikayan ang downtime mao ang paghimo lang og gamay nga pagbag-o. Apan ang matag bangko, sama sa bisan unsang ubang kompanya, napugos sa pagpaila sa labi pa ug labi ka mapuslanon nga mga bahin alang sa mga kliyente ug kaugalingon nga negosyo aron magpabilin nga kompetisyon. Sa samang higayon, ang mga bangko obligado gihapon sa pag-atiman sa ilang mga kliyente, pagpanalipod sa ilang mga tinipigan ug personal nga datos, paghatag ug komportableng kondisyon alang sa paggamit sa mga serbisyo. Kini nahimo nga ang mga organisasyon napugos sa paggugol sa daghang oras ug salapi sa pagpadayon sa kahimsog sa ilang imprastraktura sa IT, samtang dungan nga nagtanyag mga bag-ong serbisyo.
Ang gidaghanon sa gitaho nga mga kapakyasan sa teknolohiya sa sektor sa serbisyo sa pinansya sa UK misaka sa 187 porsyento tali sa 2017 ug 2018, sumala sa datos nga gipagawas sa Financial Conduct Authority sa UK. Kasagaran, ang hinungdan sa mga kapakyasan mao ang mga problema sa operasyon sa bag-ong pagpaandar. Sa parehas nga oras, hinungdanon alang sa mga bangko nga masiguro ang kanunay nga wala’y hunong nga operasyon sa tanan nga mga serbisyo ug hapit dayon nga pagreport sa mga transaksyon. Kanunay nga gikulbaan ang mga kliyente kung ang ilang kuwarta nagbitay sa usa ka lugar. Ug ang usa ka kliyente nga gikulbaan bahin sa kuwarta kanunay nga timaan sa kasamok.
Pipila ka bulan human sa kapakyasan sa TSB (sa dihang ang CEO sa bangko mi-resign), UK financial regulators ug ang Bank of England alang sa diskusyon sa mga isyu sa pagpadayon sa operasyon. Mao nga gisulayan nila nga ipataas ang pangutana kung unsa ka lawom ang mga bangko sa pagpadayon sa kabag-ohan, ug kung makagarantiya ba sila sa lig-on nga operasyon sa sistema nga naa nila karon.
Gisugyot usab sa dokumento ang mga pagbag-o sa balaod. Mahitungod kini sa paghupot sa mga tawo sulod sa kompanya nga adunay tulubagon sa kung unsa ang sayup sa mga sistema sa IT sa kompanya. Gipatin-aw kini sa mga parliyamentaryo sa Britanya niining paagiha: “Kon ikaw ang personal nga responsable, ug ikaw mahimong mabangkarota o mapriso, kini makapausab pag-ayo sa tinamdan bahin sa trabaho, lakip na ang pagdugang sa gidugayon sa panahon nga gigahin sa isyu sa pagkakasaligan ug kaluwasan.”
Mga resulta
Ang matag update ug patch moabut sa pagdumala sa peligro, labi na kung gatusan ka milyon nga dolyar ang nalambigit. Sa tinuud, kung adunay usa ka butang nga dili maayo, kini mahimong mahal sa mga termino sa salapi ug reputasyon. Kini daw klaro nga mga butang. Ug ang kapakyasan sa bangko sa panahon sa paglalin kinahanglan nga nagtudlo kanila ug daghan.
Adunay. Pero wala ko niya tudloi. Niadtong Nobyembre 2019, ang TSB, nga nakab-ot na usab ang ganansya ug hinayhinay nga gipauswag ang reputasyon niini, "nalipay" nga mga kustomer sa natad sa teknolohiya sa impormasyon. Ang ikaduhang hampak sa bangko nagpasabot nga mapugos kini sa pagsira sa 82 ka mga sanga sa 2020 aron maputol ang gasto niini. O dili siya makaluwas sa mga espesyalista sa IT.
Ang katig-a sa IT sa katapusan moabut sa usa ka gasto. Gi-report sa TSB ang pagkawala sa $134 milyon sa 2018, kung itandi sa kita nga $206 milyon sa 2017. Ang mga gasto sa post-migration, lakip ang bayad sa kostumer, pagtul-id sa mga malimbungon nga transaksyon (nga mitaas pag-ayo sa panahon sa kagubot sa bangko), ug tabang sa ikatulo nga partido, mikabat sa $ 419 milyon. Ang IT provider sa bangko gisingil usab $194 milyon alang sa papel niini sa krisis.
Bisan pa, bisan unsa nga mga leksyon ang nahibal-an gikan sa kapakyasan sa bangko sa TSB, ang mga pagkabalda mahitabo gihapon. Dili sila kalikayan. Apan sa pagsulay ug maayong code, ang mga pag-crash ug downtime mahimong makunhuran pag-ayo. Ang Cloud4Y, nga kanunay nagtabang sa mga dagkong kompanya nga molalin sa imprastraktura sa panganod, nakasabut sa kamahinungdanon sa paglihok dayon gikan sa usa ka sistema ngadto sa lain. Busa, mahimo namong ipahigayon ang load testing ug gamiton ang multi-level backup system, ingon man ang ubang mga opsyon nga makapahimo kanimo sa pagsusi sa tanan nga posible sa dili pa magsugod ang paglalin.
Unsa pa ang imong mabasa sa blog?
→
→
→
→
→
Subscribe sa among -channel, aron dili masipyat sa sunod nga artikulo! Nagsulat kami dili molapas sa kaduha sa usa ka semana ug sa negosyo lamang.
Source: www.habr.com