Maskering af IP-adresser kan være nødvendig til forskellige formål – fra adgang til blokeret indhold til omgåelse af anti-bot-systemer fra søgemaskiner og andre online ressourcer. Jeg har fundet en interessant om hvordan denne teknologi kan anvendes til at løse virksomhedens opgaver, og jeg har forberedt en tilpasset oversættelse af den.
Der findes flere muligheder for implementering af proxies:
- Residentielle proxies – residentielle adresser er de IP-adresser, som internetudbydere tildeler boligejere, og de er registreret i databaser hos regionale internetregistre (RIR). Residentielle proxies bruger netop sådanne IP'er, så forespørgsler fra dem er ikke forskellige fra dem, der sendes af rigtige brugere.
- Server proxies (data center proxy). Disse proxies har ingen forbindelse til internetudbydere for private personer. Adresser af denne type tildeles af hostingudbydere, som har købt puljer af adresser.
- Shared proxies. I dette tilfælde bruges en proxy af flere brugere på én gang; de kan være både server proxies og dem, der stilles til rådighed af udbydere for deres brugere.
- Privat proxies. I tilfælde af en privat eller dedikeret proxy har kun én bruger adgang til IP-adressen. Sådanne proxies stilles til rådighed af både specialiserede tjenester samt hostingudbydere, internetudbydere og VPN-tjenester.
Alle disse muligheder har deres fordele, men til virksomhedsmæssig brug anvendes der i stigende grad residentielle proxies. Hovedårsagen til dette er, at sådanne proxies bruger rigtige adresser fra forskellige internetudbydere i forskellige lokationer (lande, stater/regioner og byer). Som resultat ser det ud til, at interaktionen sker fra en reel bruger. Ingen online tjeneste ville overveje at blokere forespørgsler fra rigtige adresser, da det kunne være en henvendelse fra en potentiel kunde.
Dette åbner en række muligheder for virksomheder. Lad os tale om, hvordan de bruger residentielle proxies til at løse forretningsopgaver.
Hvorfor har virksomheder brug for proxies
Ifølge Distil Networks, der arbejder med bekæmpelse af bot-trafik, genereres op til 40% af webtrafikken i nutidens internet af ikke-mennesker.
Det er dog langt fra alle bots, der betragtes som gode (som crawlerne af søgemaskiner), mange webstedsejere ønsker at beskytte sig mod, at de får adgang til oplysningerne fra ressourcen eller får vigtige forretningsoplysninger.
Antallet af bots, som der normalt ikke sættes hindringer op for, udgjorde 20,40% i 2017, mens 21,80% af bots blev betragtet som "dårlige": webstedsejere forsøgte at blokere dem.
Hvorfor forsøger virksomheder at omgå sådanne blokeringer?
Indhentning af reel information fra konkurrenters websteder
Et af de primære anvendelsesområder for residentielle proxies er konkurrenceefterretning. I dag findes der værktøjer, der let kan spore brugen af serverproxies – puljer af IP-adresser fra proxyudbydere er kendte, og derfor kan de nemt blokeres. Mange populære online tjenester – såsom Amazon, Netflix, Hulu – implementerer blokke baseret på rækkevidder af IP-adresser fra hostingudbydere.
Når man bruger en residentiel proxy, ser enhver anmodning ud, som om den blev sendt af en almindelig bruger. Hvis det er nødvendigt at sende et stort antal anmodninger, kan man bruge residentielle proxies til at sende dem fra adresser i vilkårlige lande, byer og deres relaterede internetudbydere.
Beskyttelse af brandet
Endnu et praktisk anvendelsesområde for residentielle proxies er beskyttelse af brandet og bekæmpelse af piratkopiering. For eksempel kæmper medicinalproducenter – lad os sige, medicinen Viagra – altid mod sælgere af piratkopierede generika.
Sælgere af sådanne kopier begrænser typisk adgangen til deres websteder fra lande, hvor de officielle repræsentationer af producenten er placeret: dette komplicerer identificeringen af personer, der handler med forfalskninger og fremsættelsen af juridiske krav mod dem. Ved hjælp af residentielle proxies med adresser fra det samme land som webstedet for salg af piratkopier, kan denne opgave nemt løses.
Test af nye funktioner og overvågning af ydeevne
En anden vigtig anvendelse af resident proxies er test af nye funktioner på ens hjemmesider eller i applikationer – det giver mulighed for at se, hvordan alt fungerer, set med almindelige brugeres øjne. At sende et stort antal anmodninger fra IP-adresser i forskellige lande og byer gør det også muligt at teste applikationers ydeevne under stor belastning.
Denne funktion er også nyttig til overvågning af ydeevne. Internationale tjenester er interesseret i at forstå, for eksempel, hvor hurtigt en hjemmeside indlæses for brugere fra bestemte lande. Brug af resident proxies i ydeevnesystemer hjælper med at opnå de mest relevante oplysninger.
Optimering af marketing og reklame
En anden anvendelse af resident proxies er test af reklamekampagner. Med resident proxies kan man se, hvordan en bestemt annonce ser ud, for eksempel i søgeresultaterne for indbyggere i et bestemt område, og om den overhovedet vises.
Desuden hjælper resident proxies ved markedsføring på forskellige markeder med at forstå, hvor effektiv søgemaskineoptimering er: om hjemmesiden rangerer i toppen af søgemaskinerne for de ønskede søgeord på målrettede sprog, og hvordan dens placering ændrer sig over tid.
Søgemaskiner er ekstremt negative over for datainnsamling ved hjælp af deres ressourcer. Derfor forbedrer de konstant mekanismerne til at identificere dataindsamlere og effektivt blokere dem. Som resultat er brugen af søgemaskiner til datainnsamling i dag helt umulig.
Det er dog umuligt at blokere et stort antal ens anmodninger gennem resident proxies – søgemaskinerne kan ikke begrænse adgangen for rigtige brugere. Derfor er dette værktøj ideelt til garanteret datainnsamling fra søgemaskiner.
Resident proxies er også nyttige til analyse af konkurrenters reklame- og marketingaktiviteter og deres effektivitet. Denne teknologi bruges både af virksomhederne selv og af bureauer, der beskæftiger sig med bestilt markedsføring.
Indholdssamling
I Big Data-tiden er mange virksomheder bygget på aggregering af indhold fra forskellige websites og samle det på deres egen platform. Disse virksomheder er ofte nødt til at bruge resident proxies, ellers vil det være svært at opretholde en aktuel database over priser, for eksempel på produkter i bestemte kategorier på forskellige online butikker: risikoen for at blive banned er for stor.
For eksempel, for at oprette en opdateret sammenligningstabel med priser på støvsugere i online butikker, er der behov for en bot, der konstant besøger de relevante sider og opdaterer dem. I sådanne tilfælde vil brugen af dette værktøj være den mest effektive metode til at omgå anti-bot systemerne.
Dataindsamling og analyse på bestilling
I de seneste år har virksomheder, der professionelt beskæftiger sig med dataindsamling og analyse på bestilling, været i vækst. En af de markante aktører på dette marked – projektet PromptCloud – udvikler egne crawler-værktøjer, der indsamler information til videre brug i marketing, salg eller konkurrentanalyse.
Det er logisk, at bots fra sådanne virksomheder også konstant bliver banned, men takket være brugen af resident IP-adresser er det effektivt umuligt at gøre dette.
Besparelse ved at få lokale rabatter
Derudover kan tilstedeværelsen af private lokale IP-adresser bidrage til ressourcebesparelser. Mange bookingssider til billetter og hoteller viser geografisk målrettede kampagner. Disse kan kun udnyttes af kunder fra specifikke regioner.
Hvis en virksomhed skal organisere en forretningsrejse til et sådant land, kan den forsøge at finde bedre priser og spare penge ved hjælp af resident proxy.
Konklusion
Muligheden for at efterligne forespørgsler fra reelle brugere med en ægte lokal IP-adresse viser sig at være meget nyttig, også for virksomheden. Virksomheder anvender resident proxies til dataindsamling, forskellige tests, arbejde med nødvendige, men blokerede ressourcer osv.
Kilde: habr.com
