Data centra moderna centra machinis activae inauguratis habent, diversis generibus vigilantia cooperta. Sed vel specimen fectum cum perfecta vigilantia in manu recte respondere poterit retis defectu in paucis minutis tantum. Relatione in colloquio Proximo Hop 2020, methodologiam retis designavi centrum datarum consiliorum, quae unicam habet notam - centrum centri se in milliseconds sanat. Accuratius architectus placide quaestionem praefigit, dum officia simpliciter non animadvertit.
Multis fabrum retis, centrum retis notitia incipit, utique cum ToR, cum virga in eculeo. ToR duas species nexuum plerumque habet. Parvi adeunt ministrantibus, alii - plures sunt N interdum - ad aculeos primi gradus, id est ad uplinks eius. Uplinks pares considerari solent, et commercium inter uplinks aequatum est in Nullam ab 5-tupla, quod includit proto, src_ip, dst_ip, src_port, dst_port. Non miror hic.
Deinde quid simile consilium architecturae? Primi gradus aculei non sunt connexi ad invicem, sed per superspinas conexi. Littera X superspinas responsabilis erit, est fere similis in transverso connect.
Et e contrario patet, tori omnes primi gradus aculeis connecti. Quid interest in hac pictura? Si intra eculeum commercium habemus, tunc commercium, scilicet, per ToR. Si commercium intra modulum incidit, commercium fit per primum gradum spinae. Si commercium intermodularis est, sicut hic, ToR 1 et ToR 2 - tunc commercium per spinas ibit utriusque gradus primi et secundi.
In theoretica talis architectura facile scalabilis est. Si capacitatem portum habebimus, spatium in notitia media et fibra praeposita parce, tunc numerus viarum semper augeri potest, eo quod altiorem capacitatem systematis auget. Hoc perfacile est in charta facere. Simile est hoc in vita. Sed fabula hodie non est de illo.
Ius conclusiones trahi volo. Mauris interdum vias multas intra habemus. Sub condicione sui iuris sunt. Via una intra centrum datae tantum potest intra ToR. Intra moduli numerum semitarum habemus aequalem numero vicorum. Numerus viarum inter modulorum aequalis est producto numero planorum et superspinarum in quolibet plano. Ut clarius pateat, ut sensus librae accipiatur, numeros dabo, qui uno ex Yandex centris notitiis valent.
Octo sunt plana, quodlibet planum habet 32 ββsuperspinas. Quo fit, evenit ut octo viae intra moduli sint, et cum commercio intermodule iam 256 sunt.
Hoc est, si Cookbook enucleati sumus, discere culpa-tolerant centra quae se sanant discere conantur, architectura plana est recta electio. Problema scalam solvit, et in theoria facile est. Viae independentes multae sunt. Quaeritur restat: quomodo talis architectura lapsus manet? Varia sunt peccata. Et hoc nunc disputabimus.
Unus e nostris superspinae "aegrotare". Hic ad duo plane architecturae redii. His in exemplum haerebimus quia simpliciter facilius erit videre quid cum paucioribus partibus mobilibus agatur. X11 male fiat. Quomodo hoc afficiunt officia quae intus in notitia centra vivunt? Multum dependet ab eo quod defectio actualiter similis est.
Si defectus bonus est, in gradu automationis eiusdem BFD deprehenditur, automatio problematicas nexus feliciter ponit et quaestionem recedit, omnia denique sunt. Multas semitas habemus, negotiatio ilico ad itinera alterna re- fusa est, et officia nihil advertunt. Scriptum est bonum.
Scaena mala est si damna assidue habemus, et rem automatio non videt. Ut sciatur quomodo haec applicatio afficit, debebimus paulisper disserere quomodo opera TCP expendamus.
Spero me ne aliquem cum hac informatione offendas: TCP est transmissio confirmationis protocolli. Hoc est, in casu simplicissimo, mittens duas fascias mittit et in eas accipit cumulativum acantem: "duos fasciculos accepi."
Deinde mittet duas fasciculos, et res repetet. Vellem ante aliquam simpliciorem. Haec missione recta est si fenestra (numerus fasciculorum in fuga) est duo. Nempe in universali hoc non est necessario. Sed magnitudo fenestrae non afficit contextum fasciculum transmissionis.
Quid accidit, si fasciculum 3 amittimus? Hoc in casu, recipiens recipiet fasciculum 1, 2 et 4. Et mittentes explicabit optio sacci utens: βNos tres advenisse, sed medium amissum est. Dicit: "Ack 2, SACK 4."
Hoc momento, mittens sine ullis problematibus repetit fasciculum quod perierat.
Sed si novissimus fasciculus in fenestra perierit, res prorsus alia spectabit.
Qui recipit tres primas fasciculas et in primis incipit expectare. Gratias aliquot optimizationes in ACERVUS Linux nuclei TCP, exspectabit latum latum, nisi vexilla expresse indicabunt illam esse novissimum fasciculum vel simile quid. Donec moram ACK timeout expirat et tunc agnitionem mittet in tribus primis fasciculis. Sed nunc expectabo mittente. Nescit utrum quarta sarcina amissa sit an venturus sit. Et ne reticulum onerare conabitur, exspectes enucleatum indicium quod fasciculus amittitur, vel RTO timeout exspirare.
Quid est RTO timeout? Hoc maximum est ex RTT per TCP acervum et constantem rationem. Quale hoc constans sit, nunc dicemus.
Sed refert, quod si infaustum iterum et quartum latum pΓ©rit, tunc RTO duplicatur. Id est, quodque frustra conatum significat duplicare tempus.
Nunc videamus quid sit haec basis aequalis. Defalta, minimum RTO est 200 ms. Hoc est minimum RTO pro fasciculis notitiarum. Nam SYN aliter est, 1 secundus. Ut videre potes, etiam primus conatus ad fasciculos resedendi capiet 100 tempora longiora quam RT intra centrum datae.
Nunc ad missionem nostram redeamus. Quid agitur cum servitio? Ministerium incipit perdere facis. Servitium sub condicione felix sit primo et aliquid in media fenestra amittat, deinde saccum recipiat et res perditas resipiscat.
Sin adversa fortuna repetit, tum RTO habemus. Quid hic interest? Etiam in retiaculis nostris multa itinera habemus. Sed TCP negotiatio unius TCP particularis connexionis per eundem acervum fractum perget. Damna fasciculi, dummodo haec magica X11 e nostris propria non exeat, mercaturam in areas non inconvenientias ducit. Per eundem acervum fractum conamur eripere. Hoc ducit ad defectum casus cadens: centrum datae applicationes mutuo datae sunt, et quidam nexus TCP omnium horum applicationum degradare incipiunt - quia superspina afficit omnes applicationes intra centrum datae. Ut aiunt: si equum non calceo, claudus equus; claudus eques β fama non traditur; fama non traditur - bellum amisimus. Tantum hic numeratio est in secundis, ex quo quaestio oritur ad degradationem quae officia sentire incipiunt. Id est ut users de aliquo aliquo deesse possit.
Duae sunt solutiones classicae quae inter se complent. Prima est operas quae paleas mittere conantur et quaestionem sic solvent: "Aliquam in TCP ACERVUS Let's tweak. Timeouts faciamus in applicatione campestri vel diuturnae TCP sessiones cum sanitate interna checks. Problema est huiusmodi solutiones: a) omnino non scandere; b) pessime sedatus. Hoc est, etiamsi ministerium accidens TCP configurat acervum eo modo quo melius facit, primo, improbabile est omnibus applicationibus et omnibus centris notitiis applicari, et deinde, quod maxime probabile est, factum esse non intelleget. recte, quid non. Hoc est, operatur, sed male operatur et non facit scalam. Et si quaestio retis est, quis in culpa est? Nempe NOC. Quid NOC facit?
Multa officia credunt in NOC opere aliquid simile accidere. Sed sit amet enim nisi.
NOC in schemate classico in plurium systematum vigilantia evolutione versatur. Hae sunt capsulae nigrae et magna capsula alba. Circa exemplum nigrae capsulae magna vigilantia Alexander Klimenko in proximis Next Hop. Viam hanc magna opera. Sed vel massa adipiscing enim tempus tempor. Solet hoc paucis minutis. Postquam abierit, fabrum officio fungens opus est tempus ad eius operationem reprimendam, quaestionem localem constitue ac problema spatium extinguendum. Hoc est, in optimo casu, quaestionem tractans 5 minuta, in gravissimo casu, XX minuta, si non statim patet ubi damna occurrunt. Patet omne hoc tempus - 20 vel 5 minuta - officia nostra pati duraturas, quod fortasse non est bonum.
Quid vis accipere? Tot habemus vias. Et problemata oriuntur praecise quia TCP fluit infausta eodem itinere uti pergunt. Nobis opus est, quod nos pluribus itineribus intra unum TCP nexum uti sinit. Videtur quod solutionem habeamus. Est TCP, quae multipathia TCP, id est TCP propter multiplices vias appellatur. Verum, elaboratum est pro prorsus alio munere - pro Suspendisse potenti quae plures retis excogitavit. Ut maximize transferre vel primum/tergum modum facere, mechanismus est enucleatus qui plures fila (sessiones) perspicue ad applicationem gignit ac te permittit ut inter eas in eventu deficiendi mutes. Vel, ut dixi, series maximize.
Sed nuance hic est. Ut quid sit, spectare debebimus quomodo fila constituantur.
Stamina continue installantur. Primum linum primum installatur. Stamina sequentia tunc adhibenda sunt crustulum quod intra hoc filum convenerat. At hic consequat.
Difficultas est, si primum linum se non stabilit, secunda et tertia stamina numquam oriuntur. Hoc est, multipath TCP non solvit iacturam SYN fasciculum in primo fluxu. Et si SYN amittitur, multiplicatio TCP vertitur in TCP regularem. Hoc significat quod in ambitu centri notitiarum non adiuvabit nos quaestionem de damnis in officina solvendis et pluribus modis uti discimus in eventu deficiendi.
Quid adiuva nos? Nonnulli vestrum iam ex titulo conieci sunt campum magni ponderis in ulteriore historia nostra esse campum pittacii IPv6 fluentis capitis. Imo hic ager, qui in v6 apparet, non v4, XX frenos occupat, diuque de eius usu controversia est. Hoc valde interesting - controversiae erant, aliquid intra RFC fixum erat, et simul exsecutio in nucleo Linux apparuit, quod nullibi documentum fuit.
Invito te ad me venire aliquantulum inquisitionis. Inspice quid in Linux nucleum per hos annos factum sit.
anno MMXIV. Ingeniarius ex uno magno et probato comitatu addit functioni Linux kernel dependentiam pretii pittacii in nervum Nullam. Quid hic figere conabantur? Hoc ad RFC 2014 refertur, de quo in quaestione sequenti disputatum est. Intra centrum datae, IPv6438 in fasciculis IPv4 saepe encapsulatur, quia officina ipsa IPv6 est, sed IPv6 foris aliquo modo dari debet. Diu difficultates erant cum permutationibus quae sub duobus IP capitis capitibus inspicere non poterant ut ad TCP vel UDP pervenirent et inventas portus, ibi portas invenias. Nullam evenit ut, si primos duos IP capitis spectes, paene fixum evasit. Ad hoc vitandum, ut libratio huius encapsulae negotiationis recte operatur, propositum est fasciculum 4-tupleum involucrum ad valorem profluentis agri pittacii addere. Proxime idem factum est in aliis technis encapsulationis, pro UDP, pro GRE, hic usus est GRE Key agro. Uno modo vel alio, patet hic metas. Et certe tunc temporis utiles fuerunt.
In 2015, novum panni rudis ab eodem probato fabro venit. Valde interest. Hoc dicit - nos randomize Nullam in casu negativae fuso eventu. Quid est res negans profectus? Hoc est RTO de quo ante diximus, id est, amissa fenestrae caudae eventus, qui vere negativus est. Verum, difficilis est coniectura quod ita sit.
2016, alia societas honesta, etiam magna. Novissimas fusculas disgregat et facit ut Nullam, quam antea temere fecimus, nunc pro singulis SYN retransmissionibus et post singulos RTO timeout mutat. Et in hac epistula, primum et ultimum, finis ultimus affirmatur - ut negotiatio in casu damnorum vel obstructionis canalis facultatem habeat ut molliter re- fusa et multiplices vias adhibeat. Nimirum postquam multae libri editi erant, facile reperies.
Etsi non est, non potes, quia una publicatio huius rei non fuit. Sed scimus!
Quod si factum non plene intellexeris, nunc dicam tibi.
Quid factum, quid functionis Linux nucleo addita? txhash mutationes ad valorem temere post unumquodque RTO eventu. Hoc est ipsum excitando effectus negativus. Nullam pendet ab hac txhash, et titulus fluxus skb Nullam pendet. Sunt hic aliquae calculi in functionibus, singula singula in uno lapsu poni non possunt. Si quis curiosus est, per nucleum codicem ire potes et sequatur.
Quid hic interest? Valor pittacii campi fluxus ad numerum temere mutatum post singulos RTO. Quomodo hoc nostrum flumen TCP infelicem afficit?
Si sacculus incidit, nihil mutatur quod notum latum cursorem resecare conamur. Sic tantum bonum.
In casu autem RTO, dummodo pittacium fluxum functionis Nullam in ToR addidimus, negotiatio diversum iter capere potest. Et quo plures vicos, eo plus casus, quod semitam, quae per defectum certae notae non afficitur, inveniet.
Una quaestio manet - RTO. Sane alia via est, sed multum temporis in hoc consumitur. CC MS multum est. Alter est absolute silvestris. Antea locutus sum de vicissitudines quae officia configurantur. Secundum ergo tempus est, quod solet figurari per ministerium in applicatione gradu, et in hoc etiam servitus ius erit relative. Insuper, inquam, centrum reale RTT intra modernum notae 200 millium secundorum circiter esse.
Quid facias cum RTO timeouts? Tempus, quod competit RTO in casu damni notitiarum fasciculorum, faciliter ex spatio usoris configurari potest: utilitas IP est, et unus ex parametris eiusdem rto_min continet. RTO considerans, utique non globaliter, sed praefixis datis aptari debet, talem mechanismum satis operabilem spectat.
Verum, cum SYN_RTO omnia aliquanto peiora sunt. Naturam adfixa est. Kernel valorem certum 1 secundi habet, idque est. Inde usoris spatium attingere non potes. Uno tantum modo.
succurrit eBPF. Ut simpliciter dicamus, hae parvae sunt C programmata, quae diversis in locis inseri possunt in executione acervi nuclei et TCP acervi, cum quibus permagnus numerus occasus mutare potes. In genere, eBPF est longi temporis tenoris. Instead of dozens of secandi parametrorum novorum sysctl et utilitatem IP expandendi, motus movetur ad eBPF et eius officiationem auget. Utens eBPF, dynamice potes mutare obstructiones controllata et varias alias TCP occasus.
Sed interest nobis ut syn_RTO valores mutare possit. Est autem exemplum publice missae: . Quid hic factum est? Exemplum laborat, sed in se valde asperum est. Hic ponitur quod intra centrum datae primos 44 frusta comparamus: si pares, tunc intra centrum datae sumus. Et in hoc casu mutamus SYN_RTO reprimendi valorem ad 4ms. Hoc idem opus multo elegantius fieri potest. Sed hoc simplex exemplum ostendit hoc esse a) possibile; b) respective simplex.
Quid iam novimus? Quod architectura planum scalis permittit, id nobis perquam utile evenit, cum pittacium fluere in ToR dabimus et facultatem circumcirca problematum areas circumfluere. Optime RTO et SYN-RTO valores minuendi sunt programmata eBPF. Quaestio manet: tutumne est pittacium fluere pro conparatione uti? Et hic nuance est.
Puta te habere servitium in retis tuis quae in anycast vivit. Infeliciter, non vacat singillatim de rebus quaslibet excedere, sed munus distributum cum diversis corporis ministris per eandem IP oratio accessum est. Hic quaestio possibilis est: eventus RTO non solum fieri potest cum negotiatio per fabricam transit. Potest etiam accidere in gradu quiddam ToR: cum eventus incast occurrit, etiam in exercitu accidere potest cum aliquid exercitus redundat. Cum eventus RTO incidit et pittacium fluens mutat. Hoc in casu, negotiatio potest ad aliam instantiam ullam pergere. Sumamus hoc ullius status status, continet nexum status - posset esse L3 Balancer vel aliquod aliud servitium. Tunc oritur quaestio, quia post RTO nexum TCP ad cultorem pervenit, qui nihil de hoc nexu TCP scit. Et si communionem civitatis inter quoslibet ministros non habemus, talis negotiatio omittetur et nexus TCP rumpetur.
Quid tu hic agis? Intra ambitum moderatum tuum, ubi pittacium conpensationem fluere potes, notare debes valorem fluxi label cum accessu ullius servientibus. Facillima via est per eandem rationem eBPF id facere. Sed hic punctum maximum est - quid facere si non operaris retis centrum datae, sed operantis telecomes? Etiam hoc problema tuum est: incipientes a quibusdam versionibus Iuniperis et Aristae, pittacium fluxum in functionibus suis detrahere per defaltam - ingenue, ob causam incertam mihi includunt. Hoc facere potest ut nexus TCP stillare facias ab usoribus per ornatum tuum transeuntes. Magnopere igitur commendo iter itineris tuos hic iniecta.
Uno modo vel alio, ut mihi videtur, ad experimenta procedere parati sumus.
Cum pittacium in ToR fluxum daremus, agentis eBPF, qui nunc in exercitibus vivit, paravimus, decrevimus non magnum defectum proximum expectare, sed explosiones moderari. Accepimus ToR, quod habet uplinkas quatuor, et in una earum guttas posui. Regula detraxerunt et dixerunt: - Nunc perdis omnia facis. Ut videre potes in sinistra, habemus vigilantiam per-vestibulum, quod ad 75% decidit, id est, 25% de pereunt. In dextro sunt graphae officiorum viventium post hunc ToR. Essentialiter hae graphae negotiationis sunt interfaces cum ministris intra eculeum. Ut vides, etiam deprimitur. Cur inferiores decidebant, non per 25%, sed in aliquibus casibus 3-4 temporibus? Si nexus TCP infaustus est, pergit conari per coniunctionem fractam attingere. Hoc aggravatur per mores typicos servitii intra DC - unius usoris postulationem, N petitiones ad officia interna generantur, et responsio ad usorem ibit vel cum omnes notitiae fontes respondent, vel cum tempus occurrit in applicatione. planities, quae configurari etiamnum debet. Id est, omnia valde mala sunt.
Nunc idem experimentum est, sed cum pittacium defluxu valoris est. Ut videre potes, in sinistra nostra massa adipiscing 25% ab eadem omissa sunt. Hoc omnino verum est, quia nihil de retransmitibus cognoscit, fasciculos emittit et simpliciter rationem numeri traditi et amissi facis computat.
Et in ius cedula muneris est. Effectum iuncturae problematicae hic non invenies. In illis ipsis milliseconds, negotiatio ex area problemati manavit ad tres reliquas uplinks quae problema non afficiebantur. Habemus ipsum retis sanat.
Extremum hoc est labium, temporis summatim. Nunc, spero te scire quomodo aedificare se ipsum Mauris interdum elit. Linux kernel archivum per non necesse est ire et varias res speciales ibi quaerere, scis quod hic titulus Fluxus quaestionem solvit, sed ad hanc mechanismum diligenter accedere debes. Iterumque commoneo quod si operator telecomes es, pittacium profluentem quasi nullam functionem uti non debes, alioquin sessiones usorum tuorum perturbabis.
Retiacula fabrum mutationem rationis subire debent: retiaculum non ab tor incipit, non cum retis fabrica, sed cum exercitu. Specimen satis insigne est quomodo utimur eBPF et mutandi RTO et figendi pittacium fluens versus officia aliqua.
Materiae pittacii fluxus certe aptae sunt aliis applicationibus intra segmentum administrativum moderatum. Hoc commercium inter centra data esse potest, vel tali modo uti Mechanica speciali modo ad exitum negotiationis administrandum. Sed de hoc, ut spero, proxime narrabo. Optime tibi gratias ago pro attente.
Source: www.habr.com