Den senaste tiden har aktiviteten av webbrobotar som indexerar trafik ökat markant. Förutom korrekt fungerande robotar har "vilda" robotar spridit sig, som ignorerar reglerna för robots.txt, dyker upp frÄn tiotusentals olika IP-adresser och utger sig för att vara legitima anvÀndare utan att följa en rimlig politik för intensitet i förfrÄgningar. Dessa robotar skapar en enorm parasitisk belastning pÄ servrar, stör normal funktionalitet i systemen och tar tid frÄn administratörer. Aktiviteten av sÄdana robotar uppfattas av mÄnga som skadlig verksamhet.
Som en ÄtgÀrd för att bromsa arbetet för sÄdana robotar, samt robotar som skannar obotade sÄrbarheter i typiska webbapplikationer, föreslog en av administratörerna en metod kallad "zip-bomb". Idén med metoden Àr att webbroboten i svar pÄ en sidförfrÄgan fÄr innehÄll som effektivt komprimerats med metoden "deflate", vars storlek vid uppackning överskrider storleken pÄ de data som skickats över nÀtet mÄnga gÄnger. Till exempel, nÀr man anvÀnder metoden "deflate", krÀver innehÄllet frÄn /dev/zero, som Àr packat i 10 MB, vid uppackning 1 GB diskutrymme. Genom att anvÀnda "brotli"-komprimeringsmetoden har man lyckats nÄ en nivÄ dÀr överföring av 81 MB leder till uppackning av 100 TB data.
Att aktivera en sĂ„dan skydd kan göras genom att skapa fĂ€llor som Ă€r tillgĂ€ngliga via osynliga lĂ€nkar mĂ€rkta med flaggan ârel=»nofollow»â, uteslutna frĂ„n indexering via robots.txt och aktiverade vid tillrĂ€ckligt höga nivĂ„er av rekursion för robotar som försöker lĂ„tsas vara vanliga anvĂ€ndare. I praktiken rekommenderas den föreslagna metoden inte, eftersom webbplatsen kan sĂ€ttas pĂ„ Googles svarta lista och börja markeras som skadlig i webblĂ€saren Chrome med aktiverad "Safe Browsing"-lĂ€ge.
KĂ€lla: opennet.ru
