git.kernel.org-ზე მოთხოვნების 98% ბოტების მიერ გენერირდება, რაც უზარმაზარ პარაზიტულ დატვირთვას ქმნის.

kernel.org ინფრასტრუქტურის ადმინისტრატორმა, კონსტანტინ რიაბცევმა, გამოაქვეყნა git.kernel.org სერვისის ტრაფიკის ანალიზის შედეგები, რომელიც საშუალებას იძლევა, იხილოთ ბირთვის შემუშავებასთან დაკავშირებული პროექტების Git საცავების შინაარსი. Linuxსერვისი ყოველდღიურად დაახლოებით 6 მილიონ commit ინფორმაციის მოთხოვნას ამუშავებს, რომელთა 66% ბოტებისგან მოდის, რომლებსაც Anubis სისტემა ბლოკავს. მოთხოვნების 33% Anubis სისტემა ამოწმებს, რომელიც შესვლას მხოლოდ JavaScript მნიშვნელობის brute-force-ით შეყვანის შემდეგ იძლევა, რომლის SHA-256 ჰეში, სერვერის მიერ გაგზავნილ სტრიქონთან ერთად, შეიცავს საწყისი ნულების გარკვეულ რაოდენობას (ამ ამოცანის ამოსახსნელად საჭიროა CPU რესურსები, მაგრამ ვერიფიკაციისთვის რესურსები არ არის საჭირო).

შეუძლებელია ზუსტად იმის დადგენა, თუ ამ 33%-დან რომელია ადამიანი და რომელი - მოწინავე ბოტები, მაგრამ მოთხოვნების ბუნებიდან გამომდინარე, დაასკვნეს, რომ ლეგიტიმური მოთხოვნების საერთო წილი დაახლოებით 2%-ია, დანარჩენი 98% კი სკრაპერებიდან მოდის. ბოტების ერთ-ერთი მაჩვენებელია ძველი კომიტებზე პირდაპირი მოთხოვნები შემთხვევით ძველ ტოტებში, რომლებიც ნაკლებად სავარაუდოა, რომ ადამიანებს დასჭირდეთ. ბოტების აქტივობა უზარმაზარ პარაზიტულ დატვირთვას ქმნის. სერვერები რადგან „git clone“ ოპერაციის მეშვეობით მთელი კოდისა და ჩაწერის ისტორიის ერთხელ ჩამოტვირთვის ნაცვლად, ბოტები მილიარდობით მოთხოვნას აგზავნიან, ვებ ინტერფეისის საშუალებით ყველა შესაძლო ვარიანტს ცდიან და ერთი და იგივე მონაცემებს სხვადასხვა პარამეტრებით განმეორებით ითხოვენ.

ბოტების დაბლოკვა IP მისამართები ავტონომიურმა სისტემებმა სწრაფად შეწყვიტეს მუშაობა, რადგან ბოტები გადავიდნენ სახლის ან მობილური ქსელებიდან მილიონობით შემთხვევითი IP მისამართიდან მოთხოვნების გაგზავნაზე, რომლებიც მიღებული იყო ბოტნეტის აქტივობის ან ბრაუზერის დანამატების მონეტიზაციის გზით. თითოეული მისამართი აგზავნის მხოლოდ 4-5 მოთხოვნას, რაც მათ firewall-ის დონეზე დაბლოკვას უსარგებლოს ხდის.

გარკვეული პერიოდის განმავლობაში, Anubis-ის სისტემა ბოტების დაბლოკვაში ეხმარებოდა, მაგრამ დროთა განმავლობაში ბოტები Anubis-ის მიერ შემოთავაზებული გამოთვლების შესრულებას ადაპტირდნენ. სხვა საკითხებთან ერთად, ბოტებმა მე-5 დონის სირთულის ამოცანების ამოხსნა ისწავლეს, მაგრამ სირთულის დონის გაზრდა პრობლემურია, რადგან მე-5 დონესაც კი რამდენიმე წამიანი გამოთვლა სჭირდება და ლეგიტიმური მომხმარებლებისთვის ძალიან შემაწუხებელია.

შედეგად, kernel.org ინფრასტრუქტურაში სკრაპერის მოთხოვნების მომსახურება უფრო მეტ რესურსს მოიხმარს, ვიდრე ყველა სხვა ტიპის ლეგიტიმური ოპერაცია, მათ შორის „git clone“. სერვერებინებისმიერ დროს, git.kernel.org-ის მომსახურე 90 CPU ბირთვიდან 14-16 მუდმივად დაკავებულია ბოტებისთვის Git-ის კომიტების ჩვენებით. დატვირთვის შესამცირებლად, ადმინისტრატორები ახლა ცდილობენ სერვისის შესაძლებლობების შემცირებას, ზოგიერთი რესურსების ინტენსიური ოპერაციის გამორთვას, ანონიმური წვდომის შეზღუდვას და ნავიგაციისთვის ხელმისაწვდომი ბმულების რაოდენობის შემცირებას.

წყარო: opennet.ru