Arweiniodd mudo seilwaith TG a fethwyd at lygru 1,3 biliwn o gofnodion cwsmeriaid banc. Roedd hyn i gyd oherwydd profion annigonol ac agwedd wamal tuag at systemau TG cymhleth. Mae Cloud4Y yn dweud sut y digwyddodd.
Yn 2018 Saesneg sylweddoli bod ei “ysgariad” dwy flwydd oed gyda grŵp bancio Lloyds (unodd y ddau gwmni yn 1995) yn rhy ddrud. Roedd TSB yn dal i fod ynghlwm wrth ei gyn bartner trwy systemau TG Lloyds wedi'u clonio'n gyflym. Yn waeth na dim, bu’n rhaid i’r banc dalu “alimoni,” ffi drwyddedu flynyddol o $127 miliwn.
Ychydig iawn o bobl sy'n hoffi talu arian i'w exes, felly ar Ebrill 22, 2018 am 18:00 TSB dechreuodd y cam olaf o gynllun 18 mis a oedd i fod i newid popeth. Y bwriad oedd trosglwyddo biliynau o gofnodion cwsmeriaid i system TG y cwmni Sbaenaidd Banco Sabadell, a brynodd TSB am $ 2,2 biliwn yn ôl yn 2015.
Siaradodd Prif Swyddog Gweithredol Banco Sabadell, José Olu, am y digwyddiad sydd i ddod 2 wythnos cyn Nadolig 2017 yn ystod cyfarfod staff Nadoligaidd mewn neuadd gynadledda fawreddog yn Barcelona. Yr offeryn mudo pwysicaf oedd bod yn fersiwn newydd o'r system a ddatblygwyd gan Banco Sabadell: Proteo. Cafodd hyd yn oed ei ailenwi’n Proteo4UK yn benodol ar gyfer prosiect mudo TSB.
Yn ystod cyflwyniad Proteo4UK, ymffrostiodd cyfarwyddwr gweithredol Banco Sabadell, Jaime Guardiola Romojaro, fod y system newydd yn brosiect ar raddfa fawr nad oes ganddo analogau yn Ewrop, y bu dros 1000 o arbenigwyr yn gweithio arno. Ac y bydd ei weithrediad yn rhoi hwb sylweddol i dwf Banco Sabadell yn y DU.
Pennwyd Ebrill 22, 2018 fel diwrnod mudo. Roedd hi'n nos Sul tawel ganol y gwanwyn. Roedd systemau TG y banc i lawr gan fod cofnodion yn cael eu trosglwyddo o un system i'r llall. Gyda mynediad cyhoeddus i gyfrifon banc wedi'i adfer yn hwyr ddydd Sul, byddai rhywun yn disgwyl i'r banc ddychwelyd i wasanaeth yn araf ac yn llyfn.
Ond er bod Olyu a Guardiola Romojaro yn darlledu'n hapus o'r llwyfan am weithrediad y prosiect Proteo4UK, roedd y gweithwyr a oedd yn gyfrifol am y broses fudo yn nerfus iawn. Roedd y prosiect, a gymerodd 18 mis i'w gwblhau, ar ei hôl hi'n ddifrifol ac yn rhy hwyr i'r gyllideb. Nid oedd amser i gynnal profion ychwanegol. Ond mae trosglwyddo holl ddata'r cwmni (sydd, cofiwch, yn biliynau o gofnodion) i system arall yn dasg Herculean.
Mae'n troi allan bod y peirianwyr yn nerfus am reswm da.
Stub ar y safle a welodd cwsmeriaid yn rhy hir
20 munud ar ôl i TSB agor mynediad i'r cyfrifon, gan fod yn gwbl hyderus bod y mudo wedi mynd yn esmwyth, cyrhaeddodd yr adroddiadau cyntaf o broblemau.
Diflannodd cynilion pobl yn sydyn o'u cyfrifon. Roedd pryniannau o symiau di-nod wedi'u cofnodi'n anghywir fel treuliau aml-fil o ddoleri. Fe wnaeth rhai pobl fewngofnodi i'w cyfrifon personol a gweld nid eu cyfrifon banc, ond cyfrifon pobl hollol wahanol.
Am 21:00, hysbysodd cynrychiolwyr TSB y rheolydd ariannol lleol (Awdurdod Ymddygiad Ariannol y DU, FCA) fod y banc mewn trafferthion. Ond mae'r FCA eisoes wedi cymryd sylw: mae TSB wedi mynd yn wael iawn, ac mae cwsmeriaid wedi cael eu gwneud yn ffyliaid. Ac, wrth gwrs, fe ddechreuon nhw gwyno wrth (a'r dyddiau hyn, nid yw gollwng ychydig o linellau ar Twitter neu Facebook yn arbennig o anodd). Am 23:30 p.m., cysylltodd rheolydd ariannol arall â’r FCA, yr Awdurdod Rheoleiddio Darbodus (PRA), a oedd hefyd yn synhwyro bod rhywbeth o’i le.
Eisoes ymhell ar ôl hanner nos fe lwyddon nhw i fynd drwodd i un o gynrychiolwyr y banc. A gofynnwch yr unig gwestiwn iddyn nhw: “beth mae'r uffern yn digwydd?”
Cymerodd amser i ddeall maint y drasiedi, ond gwyddom bellach fod 1,3 biliwn o gofnodion 5,4 miliwn o gwsmeriaid wedi’u difrodi yn ystod y mudo. Am o leiaf wythnos, nid oedd cleientiaid yn gallu rheoli eu harian o'u cyfrifiaduron neu ddyfeisiau symudol. Nid oeddent yn gallu talu'r benthyciad, a chafodd llawer o gleientiaid banc nam ar eu hanes credyd, yn ogystal â ffioedd hwyr.
Dyma sut olwg oedd ar fanc ar-lein cwsmeriaid TSB
Pan ddechreuodd y glitches ymddangos, bron yn syth wedyn, mynnodd cynrychiolwyr banc fod y problemau’n “ysbeidiol.” Dri diwrnod yn ddiweddarach, cyhoeddwyd datganiad bod pob system yn normal. Ond parhaodd cwsmeriaid i roi gwybod am broblemau. Nid tan 26 Ebrill 2018 y cyfaddefodd prif weithredwr y banc, Paul Pester, fod TSB “ar ei liniau” wrth i seilwaith TG y banc barhau i gael “mater lled band” sy’n atal tua miliwn o gwsmeriaid rhag cyrchu gwasanaethau bancio ar-lein.
Bythefnos i mewn i'r mudo, adroddwyd bod y cais bancio ar-lein yn dal i brofi gwallau mewnol yn ymwneud â chronfa ddata SQL.
Parhaodd anawsterau talu, yn enwedig gyda biliau busnes a morgeisi, am hyd at bedair wythnos. A darganfu newyddiadurwyr hollbresennol fod TSB wedi gwrthod cynnig o gymorth gan Lloyds Banking Group ar ddechrau’r argyfwng mudo. Yn gyffredinol, gwelwyd problemau sy'n gysylltiedig â mewngofnodi i wasanaethau ar-lein a'r gallu i drosglwyddo arian tan Fedi 3.
Tipyn o hanes
Agorodd y peiriant ATM cyntaf ar 27 Mehefin 1967 ger Barclays yn Enfield
Bancio Mae systemau TG yn dod yn fwyfwy cymhleth wrth i anghenion cwsmeriaid a disgwyliadau o'r banc gynyddu. Tua 40-60 mlynedd yn ôl, byddem wedi bod yn hapus i ymweld â'n cangen banc lleol yn ystod oriau busnes i adneuo arian parod neu ei dynnu'n ôl trwy'r rhifwr.
Roedd swm yr arian yn y cyfrif yn uniongyrchol gysylltiedig â'r arian parod a'r darnau arian a roesom i'r banc. Gellid olrhain ein cyfrifon cartref gyda phen a phapur, ac nid oedd systemau cyfrifiadurol yn hygyrch i gleientiaid. Gosododd gweithwyr banc ddata o lyfrau pas a chyfryngau eraill mewn dyfeisiau a oedd yn cyfrif yr arian.
Ond yn 1967 yng ngogledd Llundain am y tro cyntaf peiriant ATM nad oedd wedi'i leoli ar safle'r banc. A newidiodd y digwyddiad hwn y bancio. Mae cyfleustra defnyddwyr wedi dod yn feincnod ar gyfer datblygu sefydliadau ariannol. Ac mae hyn wedi helpu banciau i ddod yn fwy soffistigedig o ran gweithio gyda chleientiaid a'u harian. Wedi'r cyfan, er bod systemau cyfrifiadurol ar gael i weithwyr banc yn unig, roeddent yn fodlon â'r hen ffordd "bapur" o ryngweithio â chleientiaid. Dim ond gyda dyfodiad peiriannau ATM ac yna bancio ar-lein y cafodd y cyhoedd fynediad uniongyrchol i systemau TG banc.
Dim ond y dechrau oedd peiriannau ATM. Yn fuan roedd pobl yn gallu osgoi'r llinell wrth y gofrestr arian parod trwy ffonio'r banc dros y ffôn. Roedd hyn yn gofyn am osod cardiau arbennig mewn darllenydd a oedd yn gallu dehongli'r signalau aml-amledd tôn ddeuol (DTMF) a drosglwyddwyd pan wasgodd y defnyddiwr yr allwedd “1” (tynnu arian yn ôl) neu “2” (cronfeydd blaendal).
Mae'r Rhyngrwyd a bancio symudol wedi dod â chwsmeriaid yn agosach at y systemau craidd sy'n pweru banciau. Er gwaethaf eu cyfyngiadau a'u gosodiadau amrywiol, rhaid i'r holl systemau hyn ryngweithio'n effeithiol â'i gilydd a chyda'r prif ffrâm, gan gyflawni gwiriadau balans cyfrif, gwneud trosglwyddiadau arian, ac ati.
Ychydig iawn o gleientiaid sy'n meddwl pa mor gymhleth yw'r llwybr gwybodaeth pan fyddwch, er enghraifft, yn mewngofnodi i fanc ar-lein i weld neu ddiweddaru gwybodaeth am yr arian yn eich cyfrif. Pan fyddwch chi'n mewngofnodi, mae'r data hwn yn cael ei drosglwyddo trwy set o weinyddion; pan fyddwch chi'n gwneud trafodiad, mae'r system yn dyblygu'r data hwn yn y seilwaith backend, sydd wedyn yn gwneud y gwaith codi trwm - trosglwyddo arian o un cyfrif i'r llall i dalu biliau, gwneud taliadau, a pharhau tanysgrifiadau.
Nawr lluoswch y broses hon â sawl biliwn. Yn ôl data a gasglwyd gan Fanc y Byd gyda chymorth Sefydliad Bill a Melinda Gates, mae gan oedolion ledled y byd gyfrif banc. Mae gan bob un o'r bobl hyn filiau i'w talu. Mae rhywun yn talu morgais neu'n trosglwyddo arian ar gyfer clybiau plant, mae rhywun yn talu am danysgrifiad Netflix neu'n rhentu gweinydd cwmwl. Ac mae'r holl bobl hyn yn defnyddio mwy nag un banc.
Rhaid i systemau TG mewnol niferus un banc (bancio symudol, peiriannau ATM, ac ati) beidio â rhyngweithio â'i gilydd yn unig. Mae angen iddynt ryngweithio â systemau bancio eraill ym Mrasil, Tsieina, a'r Almaen. Dylai peiriant ATM Ffrengig allu dosbarthu arian sydd ar gerdyn banc a roddwyd yn rhywle yn Bolivia.
Mae arian wedi bod yn fyd-eang erioed, ond nid yw'r system wedi bod mor gymhleth erioed o'r blaen. Mae nifer y ffyrdd o ddefnyddio systemau TG banc yn cynyddu, ond mae'r hen ffyrdd yn dal i gael eu defnyddio. Mae llwyddiant banc yn dibynnu i raddau helaeth ar ba mor “gynaladwy” yw ei seilwaith TG, a pha mor effeithiol y gall y banc ymdopi â methiant sydyn y bydd y system yn segur oherwydd hynny.
Dim profion - paratowch ar gyfer problemau
Roedd Prif Swyddog Gweithredol Banco de Sabadell, Jaime Guardiola (chwith) yn hyderus y byddai popeth yn mynd yn esmwyth. Heb weithio allan.
Nid oedd systemau cyfrifiadurol TSB yn dda iawn am ddatrys problemau'n gyflym. Roedd yna ddiffygion meddalwedd, wrth gwrs, ond mewn gwirionedd “torrodd” y banc oherwydd cymhlethdod gormodol ei systemau TG. Yn ôl yr adroddiad, a baratowyd yn nyddiau cynnar y toriad enfawr, “arweiniodd y cyfuniad o gymwysiadau newydd, mwy o ddefnydd o ficrowasanaethau ynghyd â defnyddio dwy ganolfan ddata Active/Active at risg gymhleth wrth gynhyrchu.”
Mae rhai banciau, fel HSBC, yn gweithredu'n fyd-eang ac felly mae ganddynt systemau cydgysylltiedig, cymhleth iawn hefyd. Ond maen nhw'n cael eu profi, eu mudo a'u diweddaru'n rheolaidd, yn ôl un rheolwr TG HSBC yn Lancaster. Mae’n gweld HSBC fel model ar gyfer sut y dylai banciau eraill reoli eu systemau TG: drwy neilltuo staff a threulio eu hamser. Ond ar yr un pryd mae'n cyfaddef, ar gyfer banc llai, yn enwedig un nad oes ganddo brofiad mudo, bod gwneud hyn yn gywir yn dasg anodd iawn.
Roedd mudo TSB yn anodd. Ac, yn ôl arbenigwyr, ni allai staff y banc gyrraedd y lefel hon o gymhlethdod o ran cymwysterau. Yn ogystal, nid oeddent hyd yn oed yn trafferthu gwirio eu datrysiad na phrofi'r mudo ymlaen llaw.
Yn ystod araith yn Senedd Prydain ar broblemau bancio, cadarnhaodd Andrew Bailey, prif weithredwr yr FCA, yr amheuaeth hon. Mae'n debyg mai cod gwael yn unig a achosodd y problemau cychwynnol yn TSB, ond roedd systemau rhyng-gysylltiedig y rhwydwaith ariannol byd-eang yn golygu bod ei gamgymeriadau'n parhau ac yn ddiwrthdro. Parhaodd y banc i weld gwallau annisgwyl mewn mannau eraill yn ei bensaernïaeth TG. Derbyniodd cwsmeriaid negeseuon a oedd yn ddiystyr neu heb gysylltiad â'u problemau.
Gallai profion atchweliad helpu i atal trychineb trwy ddal cod drwg cyn iddo gael ei ryddhau i gynhyrchu ac achosi difrod trwy greu bygiau na ellid eu rholio'n ôl. Ond penderfynodd y banc redeg trwy faes mwyngloddio nad oedd hyd yn oed yn gwybod amdano. Roedd y canlyniadau yn rhagweladwy. Problem arall oedd “optimeiddio” costau. Sut yr amlygodd ei hun? Y ffaith yw y penderfynwyd yn flaenorol i ddileu'r copïau wrth gefn a gedwir yn Lloyds, gan eu bod yn “bwyta” gormod o arian.
Mae banciau Prydain (ac eraill hefyd) yn ymdrechu i gyrraedd lefel argaeledd pedwar naw, hynny yw, 99,99%. Yn ymarferol, mae hyn yn golygu bod yn rhaid i'r system TG fod ar gael bob amser, gyda hyd at 52 munud o amser segur y flwyddyn. Nid yw'r system “tri naw”, 99,9%, ar yr olwg gyntaf yn gwahaniaethu llawer. Ond mewn gwirionedd mae hyn yn golygu bod amser segur yn cyrraedd 8 awr y flwyddyn. Ar gyfer y banc, mae “pedwar naw” yn dda, ond nid yw “tri naw” yn dda.
Ond bob tro y bydd cwmni'n gwneud newidiadau i'w seilwaith TG, mae'n cymryd risgiau. Wedi'r cyfan, gall rhywbeth fynd o'i le. Gall lleihau newidiadau helpu i osgoi problemau, tra bod angen profi newidiadau gofynnol yn ofalus. Ac mae rheoleiddwyr Prydain wedi canolbwyntio eu sylw ar y pwynt hwn.
Efallai mai'r ffordd hawsaf o osgoi amser segur yw gwneud llai o newidiadau. Ond mae pob banc, fel unrhyw gwmni arall, yn cael ei orfodi i gyflwyno mwy a mwy o nodweddion defnyddiol i gleientiaid a'i fusnes ei hun er mwyn parhau i fod yn gystadleuol. Ar yr un pryd, mae banciau yn dal i fod yn ofynnol i ofalu am eu cleientiaid, gan ddiogelu eu cynilion a data personol, gan ddarparu amodau cyfforddus ar gyfer defnyddio gwasanaethau. Mae'n ymddangos bod sefydliadau'n cael eu gorfodi i dreulio llawer o amser ac arian yn cynnal iechyd eu seilwaith TG, tra'n cynnig gwasanaethau newydd ar yr un pryd.
Cynyddodd nifer y methiannau technoleg yr adroddwyd amdanynt yn y sector gwasanaethau ariannol yn y DU 187 y cant rhwng 2017 a 2018, yn ôl data a ryddhawyd gan Awdurdod Ymddygiad Ariannol y DU. Yn fwyaf aml, achos methiannau yw problemau wrth weithredu swyddogaethau newydd. Ar yr un pryd, mae'n hanfodol i fanciau sicrhau bod yr holl wasanaethau'n gweithredu'n ddi-dor ac yn adrodd bron yn syth ar drafodion. Mae cleientiaid bob amser yn nerfus pan fydd eu harian yn hongian allan yn rhywle. Ac mae cleient sy'n nerfus am arian bob amser yn arwydd o drafferth.
Ychydig fisoedd ar ôl methiant TSB (ac erbyn hynny roedd Prif Swyddog Gweithredol y banc wedi ymddiswyddo), rheoleiddwyr ariannol y DU a Banc Lloegr ar gyfer trafodaeth ar faterion cynaliadwyedd gweithredol. Felly ceisiasant godi'r cwestiwn pa mor ddwfn y mae banciau wedi mynd ar drywydd arloesi, ac a allant warantu gweithrediad sefydlog y system sydd ganddynt yn awr.
Roedd y ddogfen hefyd yn cynnig newidiadau i ddeddfwriaeth. Roedd yn ymwneud â dal pobl o fewn y cwmni yn atebol am yr hyn sy'n mynd o'i le yn systemau TG y cwmni hwnnw. Esboniodd seneddwyr Prydain fel hyn: “Pan fyddwch chi’n bersonol gyfrifol, a’ch bod chi’n gallu mynd yn fethdalwr neu fynd i’r carchar, bydd hyn yn newid yr agwedd tuag at waith yn fawr, gan gynnwys cynyddu faint o amser a neilltuir i fater dibynadwyedd a diogelwch.”
Canlyniadau
Mae pob diweddariad a darn yn dibynnu ar reoli risg, yn enwedig pan fydd cannoedd o filiynau o ddoleri yn gysylltiedig. Wedi'r cyfan, os aiff rhywbeth o'i le, gall fod yn gostus o ran arian ac enw da. Byddai'n ymddangos yn bethau amlwg. A dylai methiant y banc yn ystod mudo fod wedi dysgu llawer iddynt.
Wedi. Ond ni ddysgodd i mi. Ym mis Tachwedd 2019, roedd TSB, a gyflawnodd broffidioldeb eto ac a oedd yn gwella ei enw da yn araf, “wrth ei fodd” cwsmeriaid ym maes technoleg gwybodaeth. Roedd yr ail ergyd i’r banc yn golygu y bydd yn cael ei orfodi i gau 82 o ganghennau yn 2020 er mwyn torri ei gostau. Neu ni allai gynilo ar arbenigwyr TG.
Mae stinginess gyda TG yn y pen draw yn gostus. Adroddodd TSB golled o $134 miliwn yn 2018, o gymharu ag elw o $206 miliwn yn 2017. Cyfanswm y costau ar ôl ymfudo, gan gynnwys iawndal cwsmeriaid, cywiro trafodion twyllodrus (a gynyddodd yn sydyn yn ystod yr anhrefn bancio), a chymorth trydydd parti, oedd $419 miliwn. Cafodd darparwr TG y banc hefyd fil o $194 miliwn am ei rôl yn yr argyfwng.
Fodd bynnag, ni waeth pa wersi a ddysgir o fethiant banc TSB, bydd aflonyddwch yn dal i ddigwydd. Maent yn anochel. Ond gyda phrofion a chod da, gellir lleihau damweiniau ac amser segur yn fawr. Mae Cloud4Y, sy'n aml yn helpu cwmnïau mawr i fudo i seilwaith cwmwl, yn deall pwysigrwydd symud yn gyflym o un system i'r llall. Felly, gallwn gynnal profion llwyth a defnyddio system wrth gefn aml-lefel, yn ogystal ag opsiynau eraill sy'n eich galluogi i wirio popeth posibl cyn dechrau'r mudo.
Beth arall allwch chi ei ddarllen ar y blog?
→
→
→
→
→
Tanysgrifiwch i'n -sianel, er mwyn peidio â cholli'r erthygl nesaf! Nid ydym yn ysgrifennu mwy na dwywaith yr wythnos a dim ond ar fusnes.
Ffynhonnell: hab.com