Idea je, že na jednotlivých škálách je přidaná zátěž neřešitelná, ale na úrovni masových scraperů se součtem hromadí a zvyšuje náklady na scraping.
End available: Toto je dočasné řešení, aby byl více času věnován fingerprintingu a identifikaci headless prohlížečů (např. podle toho, jak vykreslují písma), aby stránka s prokazatelným pracovním úkolem nebyla zobrazována uživatelům, kteří jsou mnohem pravděpodobně legitimní.
Poznámka: Anubis vyžaduje použití moderních funkcí JavaScriptu, které pluginy jako JShelter zakážou.
Rozsah a motivace ochrany proti scrapování
Idea spočívá v tom, že na jednotlivých místech je dodatečná zátěž méně významná, avšak při masové intenzitě scrapingů se zvyšující se zátěží součtem stává nákladnou a obtížně zvládnutelnou.
Celkové cíle zahrnují posunutí zaměření od samotného přístupového mechanizmu k identifikaci a odlišení legitimních uživatelů od automatizovaného scrapování.
Strategie fingerprintingu a identifikace headless prohlížečů
Hlavní náplní je věnovat více času fingerprintingu a identifikaci headless prohlížečů, zejména prostřednictvím způsobu vykreslování písma a dalších moderních JS funkcí.
To znamená, že výzva k provedení práce (proof of work) nemusí být zobrazována uživatelům, kteří mají vysokou pravděpodobnost legitimacy.
Vztah k Anubis a kompatibilita
Je poznamenáno, že Anubis vyžaduje použití moderních JavaScriptových funkcí, které mohou pluginy jako JShelter zakázat.
Tento aspekt ukazuje na kompromis mezi pokročilým chováním skriptů a kompatibilitou s různými nástroji na ochranu soukromí a zabezpečení.
Praktické implikace pro správce webů
V jednotlivých bodech lze říci, že dodatečná zátěž nemusí být významná na lokálním měřítku, ale při vysokém objemu scrapeování začíná být nákladná a méně efektivní.
To vede k preferenci technik, které rozpoznávají a omezují masové scrapingové aktivity, aniž by extrémně zatěžovaly legitimní uživatele.
Mistrovská třída o snímání otisků prstů v prohlížeči: Jak to funguje a jak se chránit
Možnosti budoucího vývoje
Tento návrh je dočasný placeholder, aby bylo možné více investovat do identifikace a profilování uživatelů a headless prohlížečů, čímž lze zlepšit efektivitu ochrany proti scrapingům bez nutnosti zobrazovat složité testy všem uživatelům.
V dlouhodobém horizontu by se měla zlepšit metoda rozpoznání prohlížečů podle vykreslování fontů a dalších znaků, které jsou pro headless prohlížeče typické.