TL, DR: The Bloomberg Storage Engineering team created nube repono pro usu interno quod non impedit infrastructuram et grave onus negotiandi volatilitatem in pandemico sustinere potest.
Matthaeus Leonard, cum de opere suo ut technico praeposito in Bloomberg Storage Engineering team loquitur, saepe verbis "provocatione" et "fun" utitur. Provocationes oriuntur ex amplo repositionis ambitu, ex recentissimis NVMe-San fundatis instruit ad fontem apertum in DevOps repositionis software definitae. Hoc est ubi incipit "fun" (videre mea avatar in HabrΓ©, proxime. translator).
Leonardus et turma 25 collegarum plus quam centum petabytae capacitatis et nubem internam praeficiunt pro VI 100 fabrum applicationes evolutionum pro Bloomberg Terminal, technicae quae Michael Bloomberg a billionaire fecit. Manipulus consiliorum, rationum repositionum aedificat et conservat ad Engineering Bloomberg.
Sicut ceteri professionis IT, 2020 insolitus annus fuit pro sodalibus machinarum machinarum repono sicut COVID-19 cogebat eos ad longinquum laborare. Leonardus pandemicum dixit se "quadrigis stricti" societatis "artis" impactum habuisse ut interationes faciei tollerentur, sed baculum celerrime ad operandum e domo in laptop et in conferendo video.
Mire volo dicere hoc non pejora facere. Brevis adaptatio temporis fuit - non omnes domi laborare parati erant. Post hebdomadem vel duos omnes hoc intellexerunt. Potuimus invenire vias ut nos ipsos occupatos teneremus, apparatum emere ac upgrade, ac sumptibus augere hisce temporibus societatem sustinere. Habuimus ad partum, sed non nocuimus
Maxima provocatio potest apicem COVID-19 praedixisse. Hoc mercatum volatile debebatur propter sollicitudines circa impulsum pandemici in oeconomia globali. Volumen notitiarum in Bloomberg influentis terminales e mercatis capitalibus globali paene duplicatis, ad 240 miliarda partium notitiarum aliquot diebus proximo mense Martio attingit. Hoc grave experimentum rationum repositionis est.
Cum statim duplices necessitates repono in uno die, interesting difficultates creat. Hoc vincere potuimus et efficere ut applicationis iunctiones evolutionis spatio et effectui necessariae essent. Maxime hoc pertinet quomodo de systematibus repono cogitamus. Hodie nihil creamus. Non dicimus, " ABC utimur, ita infrastructuram ABC aedificabimus." Quod "data budgeting" vocamus cum iugis nostris ad praecognoscendum usum, analysim usus et trends perficiendi, etiam securitatem spectamus. Hoc genus consiliorum, cogitationum, et methodica diligentia nobis permittit ut acrem actionem in aestus sine sudore erumpat. Nempe timidus eram, sed sensi cessi in loco meo.
Leonardus nuper locutus est cum SearchStorage in specie de repositione administrandi pro negotiis notitia-acti. Disputavit quid vellet praebere nubem privatam solutionem repositionis, cum facultatem praebere AWS features usoribus suis, dum quaelibet notitia in Bloomberg centris data servabat.
Si pandemia non est, quas difficultates machinae Bloombergae cum repositione administrandi habent?
Multas necessitates habemus, simpliciter in diversas partes divellimur. Itaque necesse est ut multa genera productorum in diversis SLA diversis gradibus praebere ad auxilium nostrum applicationis tincidunt focus in suis officiis pro cura de ipsa reposita.
Et quo consilio hoc sequeris?
Pars eorum quae facere conamur est repositionis melioris effectus. Exemplar AWS cogita ubi progressus engineer incedit, puga pyga premit, et tunc "click" magice ius repositionis genus ad solvendum problema suum accipit.
Quid tibi repono infrastructure simile?
Quia oecosystematis valde diversam et multas tincidunt varias habemus, unum opus offerre non possumus. Obiectum habemus, tabularium et scandalum repono. Haec sunt varia producta et varias rationes technologiarum tradendas praebemus. Pro scandalo utimur SAN. Etiam SDS habemus, quod aliam clausuram repositionis optionis praebet cum alia statuta perficiendi requisita. Ad files NFS utimur. SDS etiam ponitur pro obiecto repono. Truncus et objectus partes nubem privatam internam faciunt ad computandas ac repositas.
Itaque non uteris publica nubes repono?
SIC. Aliquae iunctiones evolutionis permittunt ut publicis nubibus uti. Sed pro natura negotii, plus rerum penes muros relinquentes malimus. Ita nos habemus nubes proprias quae in potestate nostra sunt. Hoc instrumentum in nostra notitia centrum sub nostra administratione positum est.
In nostra notitia centra, consilium multi-vendoris praeferimus. Praebitationes magnae sunt, sed non dicturi sumus qui exacte (est Bloombergius consilium non ut aliquem supplementum suadebit; proxime. translator).
Uteris hyperconverged infrastructuram privatam nubem tuam aedificare?
Nec. Nos Bloombergam partem eligimus ubi versus hyperconvergentiam non movemus. Computum e repositione decouple conamur ut eas independenter conscendere possimus. Directio movemur, praesertim cum nostra nube, est ut duo ista separare possimus. Et omnia, quia quaedam res in terra nostra intensiva calculi requirunt, alia vero repono. Si aequaliter scandas, facultates amittes, quamvis pecuniam, vel spatium in centris notitiis, vel facultatem emendi quod tibi non opus est. Quam ob rem volemus inter duas res communes habere, sed eas omnino diversas rationes habere et a diversis iugis administrari.
Quae impedimenta superanda sunt, ut privatam nubem construant?
Problematum scalae. Diabolus in singulis, sicut in pluribus. Cum cogitas quomodo haec operantur, quomodo molles, quomodo tractandum onere perficiendo, quomodo communicas cum corporis dignissim lobortis, res parum interest. Provocatio est viam inveniendi ad efficiendum omnia productum scalabile et fultum, quo applicatio nostra tincidunt uti velit, cum lineamentum positum ditare possit, dum in aciei moratur quod nubes publica facit. Ad eam omnis simul ut labore. Haec est quaestio principalis nostrae - per omnes regiones negotiorum laboramus, omnibus necessitatibus satisfacere conamur, alias autem necessitates non ignoramus.
Putasne opus esse postremis notis in AWS et aliis nubibus publicis?
Maxime ridiculum factum de S3 est quod norma vivendi semper mutabilis est, novae lineamenta semper adduntur. Toy novum simile est. Si quis novam in nova emissione videt, id volunt. Non omnes lineamenta AWS in ambitu nostro applicabiles sunt, ergo interest et interest scire quid tincidunt proderit et quomodo in domo sit.
Quod repono apparatu uteris?
Novissimo apparatu utimur. Nostra nubes interna omnino fundatur in NVMe Flash, quae has systemata potentissima facit. Nostram vitam paulo faciliorem reddit, et etiam lepida linea tincidunt nostris est, quia curam de repositione facienda non habent.
Quid uteris objectum repono pro?
6000 tincidunt infrastructuram laborantes habemus, ab aliquo casu usui non uniuntur. Any option you can think of, we probably have it in object storage. Nonnulli iunctiones eo utuntur ad frigidum tabularium archivalium, alii ad notitiarum translationem, alii ad applicationes transactionales utentes. Omnes hi casus usus SLA diversos gradus requirunt, ut videre potes, nos varias negotiationis species, omnes necessitates pro diversis utentibus nostrae infrastructuris. Hoc usus homogeneus non est casus currens super ullus ex nostris repositionis, quae manifesto facit res magis implicatas.
Quam magnae partes Kubernetes et continentia tibi ludunt, et quomodo illa ictum reponunt?
Fructum repositionis impellimus ad sensum nubis, sensum alicuius servitii, ubi puga tincidunt est ad suam artem accelerandam et infrastructuram in via removendum.
Editor scriptor NB: October 15, 2020 paratus erit . Disces Ceph retis technologiam repono uti in inceptis tuis ad tolerantiam emendandam culpae.
Tres iunctos habemus, prima est API turma tabulariorum. Programma grammaticum faciunt accessum, terminos, et operas praefinitas pro clientibus apud Bloomberg evolutionis app. Haec manipulus plenae acervi interretiales tincidunt, node.js, python, fons aperta technologiae, sicut Apache Airflow, student continentisationi et virtualisationi student.
Etiam duas technicas iunctiones habemus, quae frenos et bytes actu movent. Sunt magis directe ad apparatum pertinentia. Multa arma habemus, et hae iunctiones virtualizationis et vasis non utuntur.
Conamur ut cum iis quae in industria aguntur, studiosi Kubernetes rectores CSI, ac etiam in artius operando bigas Kubernetes apud Bloomberg perpendant, an Kubernetes opus repositionis congruenter cum technologiis quas habemus et habemus facere possimus. illud opus. SDS utimur ad sustentationem Kubernetes ad repositionem pertinacem coniunctam. Hanc technologiam feliciter enucleavimus, et disceptationes inter duas turmas continuamus quomodo hoc omnibus praesto esse possumus apud Bloombergam. Ostendimus hoc satis fieri posse.
Quo alio fonte aperto programmatis uteris, praesertim pro repono?
Apache Airflow utimur, HAProxy ad modum applicationis negotiationis. Utimur etiam Ceph, suggestu pro SDS. Cum hac unam rationem imperandi habere potes, sed multiplices clientes interfaces praebere. Una suggestuum virtualisationis in OpenStack currit - arcte cum hac turma laboramus. Fontem apertum virtualizationis habemus suggestum qui aperto fonte SDS suggestum repositionis adhibet. Praesent mauris.
Quae technologiae repono pro duobus proximis ad tres annos cogitas?
Semper inspicimus alias res novas frigidos fieri in industria repono. Haec pars operis nostri est, non est "hic tuum SAN, hic curo, hic tuum NFS, ibi curo". Communicare cum clientibus nostris conamur, i.e. a nobis elit tincidunt. Concurritur ad intellegendum quas difficultates solvere conantur et quomodo clientes Bloomberg externi nostros incursumant - ripas et alios qui programmate nostro utuntur. Et tunc imus in mundum repositionis notitiarum ad inveniendum opportunitates adiuvandi ad finem assequendum. Quomodo adiuvari possumus eos invenire technologiam ius repono quae eorum SLA aptat vel quod facere conantur? Quia nos tot fabrum res frigidas facientes, numquam taediosam accipit.
Nunc inspicientes vias emendare pro SDS quae potuimus potentia currere in ministris propositi generalis. Sic laboramus in NVMe super TCP, hoc est valde interesting et frigus inceptum, unus multorum. Laboramus etiam cum praecipuis hominibus industriae et nonnullis exsistentibus praebitorum ad cognoscendum quid offerant et quid in re ipsa perficiendum sit, num incipiamus uti in productione in societate. Hic novos prospectus aperit qui antea pervius non erant.
Parum auxilium in P.S.
P.S. Si possim, te admonere velim quod 28-30 Septembrium futurum sit iis enim qui Kubernetes nesciunt, sed volunt cognoscere et operari cum eo.
Source: www.habr.com