ஹப்ரின் போஸ்ட்மார்ட்டம் அறிக்கை: அது ஒரு செய்தித்தாளில் விழுந்தது

2019 கோடையின் முதல் மற்றும் இரண்டாவது மாதத்தின் முடிவு கடினமானதாக மாறியது மற்றும் உலகளாவிய தகவல் தொழில்நுட்ப சேவைகளில் பல முக்கிய வீழ்ச்சிகளால் குறிக்கப்பட்டது. குறிப்பிடத்தக்கவற்றில்: கிளவுட்ஃப்ளேர் உள்கட்டமைப்பில் இரண்டு தீவிரமான சம்பவங்கள் (முதலாவது - வளைந்த கைகள் மற்றும் அமெரிக்காவைச் சேர்ந்த சில ISPகள் BGP மீது அலட்சிய மனப்பான்மையுடன்; இரண்டாவது - CF ஐப் பயன்படுத்தும் அனைவரையும் பாதித்தது. , மற்றும் இவை பல குறிப்பிடத்தக்க சேவைகள்) மற்றும் Facebook CDN உள்கட்டமைப்பின் நிலையற்ற செயல்பாடு (Instagram மற்றும் WhatsApp உட்பட அனைத்து FB தயாரிப்புகளையும் பாதிக்கிறது). உலகளாவிய பின்னணியில் எங்கள் செயலிழப்பு மிகவும் குறைவாகவே காணப்பட்டாலும், விநியோகத்தில் நாங்கள் சிக்கிக்கொள்ள வேண்டியிருந்தது. யாரோ ஏற்கனவே கறுப்பு ஹெலிகாப்டர்கள் மற்றும் "இறையாண்மை" சதிகளை இழுக்க ஆரம்பித்துள்ளனர், எனவே எங்கள் சம்பவத்தின் பொது பிரேத பரிசோதனையை வெளியிடுகிறோம்.

ஹப்ரின் போஸ்ட்மார்ட்டம் அறிக்கை: அது ஒரு செய்தித்தாளில் விழுந்தது

03.07.2019, 16: 05
உள்ளக நெட்வொர்க் இணைப்பில் ஏற்பட்ட முறிவு போன்ற வளங்களில் உள்ள சிக்கல்கள் பதிவு செய்யத் தொடங்கின. எல்லாவற்றையும் முழுமையாகச் சரிபார்க்காததால், டேட்டாலைனை நோக்கிய வெளிப்புறச் சேனலின் செயல்திறனில் தவறு செய்யத் தொடங்கினர், ஏனெனில் உள் நெட்வொர்க் இன் இன்டர்நெட் அணுகலில் (NAT), BGP அமர்வை டேட்டாலைனை நோக்கி வைக்கும் அளவிற்கு சிக்கல் ஏற்பட்டது என்பது தெளிவாகியது.

03.07.2019, 16: 35
நெட்வொர்க் முகவரி மொழிபெயர்ப்பு மற்றும் தளத்தின் உள்ளூர் நெட்வொர்க்கிலிருந்து இணையத்திற்கு (NAT) அணுகலை வழங்கும் உபகரணங்கள் தோல்வியடைந்தது என்பது தெளிவாகியது. உபகரணங்களை மறுதொடக்கம் செய்வதற்கான முயற்சிகள் எதற்கும் வழிவகுக்கவில்லை, தொழில்நுட்ப ஆதரவிலிருந்து பதிலைப் பெறுவதற்கு முன்பு இணைப்பை ஒழுங்கமைப்பதற்கான மாற்று விருப்பங்களுக்கான தேடல் தொடங்கியது, ஏனெனில் அனுபவத்திலிருந்து, இது பெரும்பாலும் உதவாது.

இந்த உபகரணமானது கிளையன்ட் VPN ஊழியர்களின் உள்வரும் இணைப்புகளை நிறுத்தியதாலும், ரிமோட் மீட்புப் பணிகளை மேற்கொள்வது மிகவும் கடினமாகிவிட்டதாலும் பிரச்சனை சற்று மோசமாகியது.

03.07.2019, 16: 40
ஏற்கனவே சிறப்பாக செயல்பட்ட, ஏற்கனவே உள்ள காப்புப்பிரதி NAT திட்டத்தை புதுப்பிக்க முயற்சித்தோம். ஆனால் பல நெட்வொர்க் புதுப்பிப்புகள் இந்த திட்டத்தை முற்றிலும் செயலிழக்கச் செய்தன என்பது தெளிவாகியது, ஏனெனில் அதன் மறுசீரமைப்பு சிறப்பாக செயல்படாது, அல்லது மோசமான நிலையில், ஏற்கனவே வேலை செய்வதை உடைக்கலாம்.

முதுகெலும்புக்கு சேவை செய்யும் புதிய ரவுட்டர்களின் தொகுப்பிற்கு போக்குவரத்தை மாற்றுவதற்கான இரண்டு யோசனைகளில் நாங்கள் பணியாற்றத் தொடங்கினோம், ஆனால் முக்கிய நெட்வொர்க்கில் உள்ள வழித்தடங்களின் விநியோகத்தின் தனித்தன்மையின் காரணமாக அவை செயல்பட முடியாததாகத் தோன்றியது.

03.07.2019, 17: 05
அதே நேரத்தில், பெயர் சேவையகங்களில் உள்ள பெயர் தீர்மான பொறிமுறையில் ஒரு சிக்கல் கண்டறியப்பட்டது, இது பயன்பாடுகளில் இறுதிப்புள்ளிகளைத் தீர்ப்பதில் பிழைகளுக்கு வழிவகுத்தது, மேலும் அவை முக்கியமான சேவைகளின் பதிவுகளுடன் ஹோஸ்ட் கோப்புகளை விரைவாக நிரப்பத் தொடங்கின.

03.07.2019, 17: 27
Habr இன் வரையறுக்கப்பட்ட செயல்பாடு மீட்டமைக்கப்பட்டது.

03.07.2019, 17: 43
ஆனால் இறுதியில், எல்லை திசைவிகளில் ஒன்றின் மூலம் போக்குவரத்தை ஒழுங்கமைக்க ஒப்பீட்டளவில் பாதுகாப்பான தீர்வு காணப்பட்டது, இது விரைவாக நிறுவப்பட்டது. இணைய இணைப்பு மீட்டமைக்கப்பட்டது.

அடுத்த சில நிமிடங்களில், கண்காணிப்பு முகவர்களின் செயல்பாட்டை மீட்டெடுப்பது குறித்து கண்காணிப்பு அமைப்புகளிலிருந்து நிறைய அறிவிப்புகள் வந்தன, ஆனால் பெயர் சேவையகங்களில் (டிஎன்எஸ்) பெயர் தெளிவுத்திறன் பொறிமுறை உடைந்ததால் சில சேவைகள் செயலிழந்தன.

ஹப்ரின் போஸ்ட்மார்ட்டம் அறிக்கை: அது ஒரு செய்தித்தாளில் விழுந்தது

03.07.2019, 17: 52
NS மறுதொடக்கம் செய்யப்பட்டது மற்றும் தற்காலிக சேமிப்பு அழிக்கப்பட்டது. தீர்வு மீட்டெடுக்கப்பட்டது.

03.07.2019, 17: 55
MK, Freelansim மற்றும் Toaster தவிர அனைத்து சேவைகளும் செயல்படத் தொடங்கின.

03.07.2019, 18: 02
எம்.கே மற்றும் ஃப்ரீலான்சிம் வேலை செய்யத் தொடங்கினர்.

03.07.2019, 18: 07
டேட்டாலைன் மூலம் அப்பாவி BGP அமர்வை மீண்டும் கொண்டு வாருங்கள்.

03.07.2019, 18: 25
அவர்கள் வளங்களில் உள்ள சிக்கல்களைப் பதிவு செய்யத் தொடங்கினர், இது NAT பூலின் வெளிப்புற முகவரியில் ஏற்பட்ட மாற்றம் மற்றும் பல சேவைகளின் ac இல் இல்லாததால் உடனடியாக சரி செய்யப்பட்டது. டோஸ்டர் உடனடியாக வேலை செய்யத் தொடங்கியது.

03.07.2019, 20: 30
டெலிகிராம் போட்கள் தொடர்பான பிழைகளை நாங்கள் கவனித்தோம். வெளிப்புற முகவரியை இரண்டு ஏசிஎல் (ப்ராக்ஸி சர்வர்கள்) இல் பதிவு செய்ய மறந்துவிட்டார்கள், அது உடனடியாக சரி செய்யப்பட்டது.

ஹப்ரின் போஸ்ட்மார்ட்டம் அறிக்கை: அது ஒரு செய்தித்தாளில் விழுந்தது

கண்டுபிடிப்புகள்

  • அதன் பொருத்தம் குறித்த சந்தேகங்களை முன்னர் விதைத்த உபகரணங்கள் தோல்வியடைந்தன. நெட்வொர்க்கின் வளர்ச்சியில் குறுக்கீடு மற்றும் பொருந்தக்கூடிய சிக்கல்கள் இருந்ததால், அதை வேலையிலிருந்து அகற்றுவதற்கான திட்டங்கள் இருந்தன, ஆனால் அதே நேரத்தில் இது ஒரு முக்கியமான செயல்பாட்டைச் செய்தது, அதனால்தான் எந்தவொரு மாற்றீடும் சேவைகளுக்கு இடையூறு இல்லாமல் தொழில்நுட்ப ரீதியாக கடினமாக இருந்தது. இப்போது நீங்கள் செல்லலாம்.
  • NAT நெட்வொர்க்கிற்கு வெளியே உள்ள புதிய முதுகெலும்பு நெட்வொர்க்கிற்கு அவற்றை நகர்த்துவதன் மூலம் DNS சிக்கலைத் தவிர்க்கலாம், மேலும் மொழிபெயர்ப்பு இல்லாமலேயே சாம்பல் நெட்வொர்க்குடன் முழு இணைப்பும் உள்ளது (இது சம்பவத்திற்கு முந்தைய திட்டம்).
  • RDBMS க்ளஸ்டர்களை இணைக்கும்போது டொமைன் பெயர்களைப் பயன்படுத்தக் கூடாது, ஏனெனில் IP முகவரியை வெளிப்படையாக மாற்றுவதற்கான வசதி குறிப்பாக அவசியமில்லை, ஏனெனில் இதுபோன்ற கையாளுதல்கள் இன்னும் கிளஸ்டரை மீண்டும் உருவாக்க வேண்டும். இந்த முடிவு வரலாற்று காரணங்களால் கட்டளையிடப்பட்டது மற்றும் முதலில், RDBMS உள்ளமைவுகளில் பெயரால் இறுதிப்புள்ளிகளின் வெளிப்படையான தன்மையால் கட்டளையிடப்பட்டது. பொதுவாக, ஒரு உன்னதமான பொறி.
  • கொள்கையளவில், "ரூனட்டின் இறையாண்மை" உடன் ஒப்பிடக்கூடிய பயிற்சிகள் நடத்தப்பட்டுள்ளன; தன்னாட்சி உயிர்வாழும் திறன்களை வலுப்படுத்துவது பற்றி சிந்திக்க ஏதாவது உள்ளது.

ஆதாரம்: www.habr.com

கருத்தைச் சேர்