Eng gescheitert IT-Infrastrukturmigratioun huet zu der Korruptioun vun 1,3 Milliarde Bankclientrecords gefouert. Dëst war alles wéinst net genuch Tester an enger frivoler Haltung vis-à-vis vun komplexen IT-Systemer. Cloud4Y erzielt wéi et geschitt ass.
An 2018 Englesch realiséiert datt seng zwee Joer al "Scheedung" mat der Bankegrupp Lloyds (béid Firmen fusionéiert 1995) ze deier war. TSB war nach ëmmer mat sengem fréiere Partner gebonnen duerch séier gekloont Lloyds IT Systemer. Schlëmmst vun allem huet d'Bank "Alimony" missen bezuelen, eng $ 127 Milliounen alljährlech Lizenzgebühr.
Puer Leit gär Suen un hir Exe bezuelen, also den 22. Abrëll 2018 um 18:00 huet TSB d'Finale Etapp vun engem 18-Méint Plang ugefaang, deen alles sollt änneren. Et war geplangt Milliarde vu Clientsrecords un den IT-System vun der spuenescher Firma Banco Sabadell ze transferéieren, déi TSB fir 2,2 Milliarden Dollar zréck am Joer 2015 kaaft huet.
De Banco Sabadell CEO José Olu huet iwwer dat kommend Event geschwat 2 Woche viru Chrëschtdag 2017 wärend enger festlecher Personalversammlung an engem prestigiéisen Konferenzsall zu Barcelona. Dat wichtegst Migratiounsinstrument sollt eng nei Versioun vum System sinn, dee vum Banco Sabadell entwéckelt gouf: Proteo. Et gouf souguer ëmbenannt Proteo4UK speziell fir den TSB Migratiounsprojet.
Bei der Presentatioun vu Proteo4UK huet de Banco Sabadell Exekutivdirekter Jaime Guardiola Romojaro gebrauchen datt den neie System e grousse Projet ass, deen keng Analoga an Europa huet, op deem iwwer 1000 Spezialisten geschafft hunn. An datt hir Ëmsetzung e wesentleche Boost fir de Wuesstum vun der Banco Sabadell a Groussbritannien gëtt.
Den 22. Abrëll 2018 gouf als Migratiounsdag festgeluecht. Et war e rouege Sonndeg Owend Mëtt Fréijoer. D'IT-Systemer vun der Bank waren erof wéi d'Records vun engem System an deen anere transferéiert goufen. Mam ëffentlechen Accès op Bankkonten, déi e Sonndeg spéit restauréiert goufen, géif ee sech erwaarden, datt d'Bank lues a lues an d'Déngscht kënnt.
Awer wärend Olyu a Guardiola Romojaro glécklech vun der Bühn iwwer d'Ëmsetzung vum Proteo4UK-Projet iwwerdroen hunn, waren d'Mataarbechter, déi fir de Migratiounsprozess verantwortlech sinn, ganz nervös. De Projet, deen 18 Méint gedauert huet fir ze kompletéieren, war eescht hannert dem Zäitplang an iwwer Budget. Et war keng Zäit fir zousätzlech Tester ze maachen. Awer all d'Donnéeën vun der Firma ze transferéieren (wat, erënnert Iech, Milliarden records ass) an en anere System ass eng Herkulesch Aufgab.
Et huet sech erausgestallt, datt d'Ingenieuren aus guddem Grond nervös waren.
E Stéck um Site deen d'Clienten ze laang gesinn hunn
20 Minutte nodeems TSB den Zougang zu de Konten opgemaach huet, voll zouversiichtlech datt d'Migratioun glat gaang ass, sinn déi éischt Probleemer ukomm.
D'Spuere vun de Leit sinn op eemol vun hire Konten verschwonnen. Akeef vun onbestëmmende Betrag goufe falsch als Multi-dausend-Dollar Ausgaben opgeholl. E puer Leit hunn op hir perséinlech Konten ageloggt an hunn net hir Bankkonten gesinn, mee d'Konte vu ganz anere Leit.
Um 21:00 hunn TSB Vertrieder de lokale Finanzregulator (d'UK Financial Conduct Authority, FCA) informéiert datt d'Bank a Schwieregkeeten war. Awer d'FCA huet sech scho bemierkt: TSB huet wierklech schlecht geschrauft, a Cliente goufen zum Narr gemaach. An, natierlech, si ugefaang ze beschwéieren (an hautdesdaags ass e puer Zeilen op Twitter oder Facebook net besonnesch schwéier). Um 23:30 Auer gouf d'FCA vun engem anere Finanzregulator kontaktéiert, der Prudential Regulation Authority (PRA), déi och gefillt huet datt eppes falsch war.
Scho gutt no Mëtternuecht konnten si bei ee vun de Bankvertrieder duerchkommen. A stellt hinnen déi eenzeg Fro: "Wat ass lass?"
Et huet Zäit gedauert fir d'Skala vun der Tragedie ze verstoen, awer mir wëssen elo datt 1,3 Milliarde Rekorder vu 5,4 Millioune Cliente während der Migratioun beschiedegt goufen. Fir op d'mannst eng Woch konnten d'Clienten hir Suen net vun hire Computeren oder mobilen Apparater verwalten. Si konnten de Prêt net bezuelen, a vill Bankclienten kruten e Feeler an hirer Kredittgeschicht, souwéi spéider Fraisen.
Dëst ass wéi d'TSB Client Online Bank ausgesinn huet
Wéi d'Glitches ugefaang hunn, bal direkt duerno, hunn d'Bankvertrieder insistéiert datt d'Problemer "intermittéiert" waren. Dräi Deeg méi spéit gouf eng Erklärung erausginn datt all Systemer normal waren. Mee Clienten weider Problemer ze Rapport. Eréischt den 26. Abrëll 2018 huet de Chef vun der Bank, Paul Pester, zouginn datt den TSB "op de Knéien" war, well d'IT Infrastruktur vun der Bank weider e "Bandbreedprobleem" huet, wat verhënnert datt ongeféier eng Millioun Clienten Zougang zu Online Banking Servicer hunn.
Zwou Wochen an der Migratioun, gouf d'Online Banking Applikatioun nach gemellt intern Feeler am Zesummenhang mat der SQL Datebank ze erliewen.
Bezuelungsschwieregkeeten, besonnesch mat Geschäfts- an Hypothéikrechnungen, si bis zu véier Woche weidergaang. An ubiquitous Journalisten hunn erausfonnt datt TSB eng Offer vun Hëllef vum Lloyds Banking Group am Ufank vun der Migratiounskris refuséiert huet. Am Allgemengen, Problemer am Zesummenhang mat der Umeldung an online Servicer an der Fähegkeet Suen ze Transfert goufen observéiert bis September 3.
E bësse vun der Geschicht
Den éischten Geldautomat huet de 27. Juni 1967 bei Barclays zu Enfield opgemaach
Banking IT Systemer ginn ëmmer méi komplex wéi d'Clientebedürfnisser an d'Erwaardunge vun der Bank eropgoen. Virun ongeféier 40-60 Joer wiere mir frou gewiescht eis lokal Bankenzweig an der Aarbechtszäit ze besichen, fir Geld ze deposéieren oder se duerch d'Tähte zréckzéien.
D'Quantitéit u Suen op de Kont war direkt mat de Suen a Mënzen verbonnen, déi mir der Bank ginn hunn. Eis Heemrechnung konnt mat Pen a Pabeier verfollegt ginn, a Computersystemer waren net zougänglech fir Clienten. Bank Mataarbechter hunn Daten aus Passbooks an aner Medien an Apparater gesat, déi d'Sue gezielt hunn.
Mee 1967 am Norde London fir d'éischte Kéier en Geldautomaten deen net op der Bankgebai war. An dëst Evenement geännert Banking. Benotzerkomfort ass e Benchmark fir d'Entwécklung vu Finanzinstituter ginn. An dëst huet d'Banken gehollef méi sophistikéiert ze ginn a punkto Aarbecht mat Clienten an hire Suen. Iwwerhaapt, wärend Computersystemer nëmme fir Bankbeamten verfügbar waren, ware se zefridde mam alen "Pabeier" Wee fir mat Clienten ze interagéieren. Et war eréischt mat der Entstoe vun Geldautomaten an duerno Online Banking datt d'Allgemengheet direkten Zougang zu Bank-IT-Systemer krut.
Geldautomaten waren just den Ufank. Geschwënn konnten d'Leit d'Linn bei der Kees vermeiden andeems se einfach per Telefon un d'Bank ruffen. Dëst erfuerdert speziell Kaarten, déi an e Lieser agefouert goufen, déi fäeg sinn d'Dual-Tone Multi-Frequenz (DTMF) Signaler z'entschlësselen, déi iwwerdroe ginn wann de Benotzer de Schlëssel "1" (Suen zréckzéien) oder "2" (Depot Fongen) gedréckt huet.
Den Internet a mobil Banking hunn d'Cliente méi no un d'Kärsystemer bruecht, déi d'Banken ubidden. Trotz hire variéieren Aschränkungen an Astellungen, all dës Systemer mussen effektiv mat all aner a mat der Haaptrei interagéieren, Kont Gläichgewiicht Kontrollen Leeschtunge, Suen Transfere maachen, etc.
Puer Clienten denken iwwer wéi komplex d'Informatiounswee ass, wann Dir zum Beispill an eng Online Bank aloggen fir Informatiounen iwwer d'Suen op Ärem Kont ze gesinn oder ze aktualiséieren. Wann Dir Iech aloggen, ginn dës Donnéeën duerch e Set vu Servere weidergeleet; wann Dir eng Transaktioun maacht, duplizéiert de System dës Donnéeën an der Backend Infrastruktur, déi dann déi schwéier Liften mécht - Sue vun engem Kont op en aneren transferéieren fir Rechnungen ze bezuelen, maachen Bezuelungen, a weider Abonnementer.
Elo multiplizéieren dëse Prozess mat e puer Milliarden. Laut Donnéeën zesummegestallt vun der Weltbank mat der Hëllef vun der Bill a Melinda Gates Foundation, Erwuessener op der ganzer Welt hunn e Bankkonto. Jiddereng vun dëse Leit huet Rechnungen ze bezuelen. Een bezilt eng Hypothéik oder iwwerweist Sue fir Kannerveräiner, een bezilt en Netflix Abonnement oder lount e Cloud-Server. An all dës Leit benotzen méi wéi eng Bank.
Vill intern IT Systemer vun enger Bank (Mobile Banking, Geldautomaten, etc.) däerfen net einfach mateneen interagéieren. Si musse mat anere Bankesystemer a Brasilien, China an Däitschland interagéieren. E franséische Geldautomat soll fäeg sinn Suen auszeginn, déi op enger Bankkaart sinn, déi iergendwou a Bolivien erausginn ass.
Geld war ëmmer global, awer nach ni war de System esou komplex. D'Zuel vun de Weeër fir Bank IT Systemer ze benotzen ass erop, awer déi al Weeër sinn nach ëmmer am Gebrauch. Den Erfolleg vun enger Bank hänkt gréisstendeels dovun of wéi "ënnerhaltbar" seng IT-Infrastruktur ass, a wéi effektiv d'Bank mat engem plötzlechen Echec këmmere kann, wéinst deem de System idle wäert sinn.
Keng Tester - virbereeden fir Problemer
Banco de Sabadell CEO Jaime Guardiola (lénks) war zouversiichtlech datt alles glat géif goen. Huet net geklappt.
TSB Computer Systemer waren net ganz gutt Problemer séier ze léisen. Et waren, natierlech, Software Glitches, mä a Wierklechkeet d'Bank "gebrach" wéinst der exzessiv Komplexitéit vun hiren IT Systemer. Laut dem Bericht, deen an de fréie Deeg vum massiven Ausfall virbereet gouf, "d'Kombinatioun vun neien Uwendungen, verstäerkter Notzung vu Mikroservicer kombinéiert mat der Notzung vun zwee Active / Active Datacenters huet zu komplexe Risiko an der Produktioun gefouert."
Verschidde Banken, wéi HSBC, funktionnéieren weltwäit an hunn dofir och ganz komplex, matenee verbonne Systemer. Awer si gi regelméisseg getest, migréiert an aktualiséiert, laut engem HSBC IT Manager zu Lancaster. Hie gesäit den HSBC als e Modell fir wéi aner Banken hir IT-Systeme solle verwalten: andeems se Personal widmen an hir Zäit verbréngen. Awer gläichzäiteg gëtt hien zou datt fir eng méi kleng Bank, besonnesch eng déi keng Migratiounserfahrung huet, dëst richteg maachen eng ganz schwéier Aufgab ass.
D'TSB Migratioun war schwéier. An, laut Experten, konnt d'Bankpersonal einfach net dësen Niveau vun der Komplexitéit a punkto Qualifikatiounen erreechen. Ausserdeem hu se sech net emol gestéiert fir hir Léisung ze kontrolléieren oder d'Migratioun am Viraus ze testen.
Bei enger Ried am britesche Parlament iwwer Bankeproblemer huet den Andrew Bailey, Chefdirekter vun der FCA, dëse Verdacht bestätegt. Schlechte Code huet wahrscheinlech nëmmen déi initial Probleemer bei TSB verursaacht, awer déi interconnectéiert Systemer vum weltwäite Finanznetz hunn bedeit datt seng Feeler dauerhaft an irreversibel waren. D'Bank huet weider onerwaart Feeler soss anzwousch an hirer IT-Architektur gesinn. D'Clientë krute Messagen déi sënnlos oder net mat hire Probleemer verbonne waren.
Regressiounstest kéint hëllefen, Katastroph ze vermeiden andeems en schlechte Code erfaasst ier en an d'Produktioun verëffentlecht gouf a Schued verursaacht huet andeems Bugs kreéiert déi net zréckgerullt kënne ginn. Awer d'Bank huet decidéiert duerch e Minefeld ze lafen, deen se net emol wousst. D'Konsequenze waren prévisibel. En anere Problem war d'"Optimisatioun" vun de Käschten. Wéi huet et sech manifestéiert? D'Tatsaach ass, datt et virdru beschloss gouf, d'Backupkopien, déi bei Lloyds gespäichert sinn, ofzeschafen, well se zevill Suen "opgefruer hunn".
Britesch Banken (an och anerer) beméien sech fir e véier-néng Disponibilitéitsniveau z'erreechen, dat heescht 99,99%. An der Praxis heescht dat, datt den IT-System zu all Moment muss disponibel sinn, mat bis zu 52 Minutte Stéierungen pro Joer. De System "dräi Néng", 99,9%, op den éischte Bléck ënnerscheet sech net vill. Awer an der Realitéit heescht dat datt d'Dauerzäit 8 Stonnen pro Joer erreecht. Fir d'Bank ass "véier néng" gutt, awer "dräi néng" net.
Awer all Kéier wann eng Firma Ännerungen un hirer IT-Infrastruktur mécht, hëlt se Risiken. No allem kann eppes falsch goen. Ännerunge reduzéieren kann hëllefen Problemer ze vermeiden, wärend erfuerderlech Ännerungen virsiichteg Tester brauchen. A britesch Reguléierer hunn hir Opmierksamkeet op dësem Punkt konzentréiert.
Vläicht ass deen einfachste Wee fir Ausdauer ze vermeiden ass einfach manner Ännerungen ze maachen. Awer all Bank, wéi all aner Firma, ass gezwongen ëmmer méi nëtzlech Funktiounen fir Clienten an hiren eegene Geschäft aféieren fir kompetitiv ze bleiwen. Zur selwechter Zäit sinn d'Banken nach ëmmer verpflicht fir hir Clienten ze këmmeren, hir Erspuernisser a perséinlech Donnéeën ze schützen, bequem Konditioune fir Servicer ze benotzen. Et stellt sech eraus datt Organisatiounen gezwongen sinn vill Zäit a Suen ze verbréngen fir d'Gesondheet vun hirer IT-Infrastruktur z'erhalen, a gläichzäiteg nei Servicer ubidden.
D'Zuel vun de gemellten Technologiefehler am Finanzservicer Secteur a Groussbritannien ass ëm 187 Prozent eropgaang tëscht 2017 an 2018, laut Daten verëffentlecht vun der UK Financial Conduct Authority. Meeschtens ass d'Ursaach vun Feeler Problemer an der Operatioun vun neie Funktionalitéit. Zur selwechter Zäit ass et kritesch fir Banken déi konstant onënnerbrach Operatioun vun alle Servicer a bal instantane Berichterstattung vun Transaktiounen ze garantéieren. Clienten sinn ëmmer nervös wann hir Suen iergendwou hänken. An e Client deen nervös iwwer Suen ass ass ëmmer en Zeeche vun Ierger.
E puer Méint nom Echec bei TSB (zu deem Zäitpunkt huet de CEO vun der Bank demissionéiert), UK Finanzreegler an d'Bank of England fir Diskussioun iwwer operationell Nohaltegkeet Themen. Also hu se probéiert d'Fro ze stellen, wéi déif Banken an der Verfollegung vun Innovatioun gaangen sinn, an ob se déi stabil Operatioun vum System garantéieren, deen se elo hunn.
D'Dokument proposéiert och Ännerunge fir d'Gesetzgebung. Et goung drëm Leit bannent der Firma verantwortlech ze halen fir wat an den IT Systemer vun där Firma falsch leeft. Britesch Parlamentarier hunn et esou erkläert: "Wann Dir perséinlech verantwortlech sidd, an Dir kënnt Faillite goen oder an de Prisong goen, wäert dëst d'Haltung vun der Aarbecht staark änneren, dorënner d'Erhéijung vun der Zäit fir d'Fro vun Zouverlässegkeet a Sécherheet."
Resultater
All Update a Patch kënnt op Risikomanagement erof, besonnesch wann Honnerte vu Millioune Dollar involvéiert sinn. No allem, wann eppes falsch geet, kann et deier sinn a punkto Suen a Ruff. Et géif evident Saache schéngen. An den Echec vun der Bank während der Migratioun sollt hinnen vill geléiert hunn.
Huet. Awer hien huet mech net geléiert. Am November 2019 huet den TSB, deen erëm d'Rentabilitéit erreecht huet a lues a lues hire Ruff verbessert huet, Clienten "gefreet" am Beräich vun Informatiounstechnologie. Den zweete Schlag fir d'Bank huet bedeit datt se gezwongen ass 82 Filialen am Joer 2020 zouzemaachen fir hir Käschten ze reduzéieren. Oder hie konnt einfach net op IT Spezialisten spueren.
Stinginess mat IT kënnt schlussendlech op Käschte. TSB huet e Verloscht vun $ 134 Milliounen am Joer 2018 gemellt, am Verglach mat engem Gewënn vun $ 206 Milliounen am Joer 2017. Post-Migratiounskäschte, dorënner Clientskompensatioun, Korrigéiere vu betrügereschen Transaktiounen (déi wärend dem Bankchaos staark eropgaange sinn), an Drëtt-Partei Hëllef, am Ganzen $ 419 Milliounen. Den IT-Provider vun der Bank gouf och $ 194 Millioune fir seng Roll an der Kris verrechent.
Wéi och ëmmer, egal wéi eng Lektioune vum TSB Bankfehler geléiert ginn, wäerten nach ëmmer Stéierunge geschéien. Si sinn inévitabel. Awer mat Testen a gudde Code, Crashen an Ausdauer kënne staark reduzéiert ginn. Cloud4Y, déi dacks grouss Firmen hëlleft an d'Cloudinfrastruktur ze migréieren, versteet d'Wichtegkeet vu séier vun engem System an en anert ze plënneren. Dofir kënne mir Laaschttesten ausféieren an e Multi-Level Backup-System benotzen, wéi och aner Optiounen, déi Iech erlaben alles méiglech ze kontrolléieren ier Dir d'Migratioun ufänkt.
Wat soss kënnt Dir um Blog liesen?
→
→
→
→
→
Abonnéiert Iech op eis -Kanal fir datt Dir den nächsten Artikel net verpasst! Mir schreiwen net méi wéi zweemol d'Woch an nëmmen op Betrib.
Source: will.com