[ENIGME] Pourquoi ce site de hentai détecte mes proxies ?

Scraping
1

Bonjour à tous,
J’essaye de scraper les images du site e-hentai.org (c’est un site pornographique).

Quand je fais trop de requête chez eux ils m’affichent cette image, disant que mon je ne peux plus voir leur contenu temporairement.

image
image377×610 25 KB

J’ai donc essayé des proxies payants provenant de ce site ps://www.webshare.io et j’ai changé mon header régulièrement, mais rien n’à faire, le site continue de me bloquer !

Je n’ai jamais rencontré un problème dans le genre, les proxies sont fonctionnels et rapides, mais je me fais quand même détecter, à n’y rien comprendre.

Auriez-vous des pistes ?

Infos suplémentaires pour les détectives :

Merci d’avance !

2

C’est une erreur 509, c’est un problème coté serveur. Tes robots sont simplement en train de surcharger l’hébergement discount du site. Il faut savoir que les gros hébergeurs refusent le porno pour des raisons de responsabilité et que souvent les gens du milieu se rabattent sur des solution maison ou des serveurs perdu en Russie . Essaye de ralentir la cadence de tes requêtes

Autre piste :

  • j’ai l’impression que ton changement de headers n’implique pas un changement de client, vérifie que t’as bien bloqué les cache et les cookies de navigation et aussi que tu as bien fait ta rotation d’ip correctement en envoyant tes requetes sur un webhook

  • Moins probable étant donné le budget du site. La plupart des proxies connus et déjà utilisés pour du scraping sont blacklistés et certains sites les bloquent directement (par exemple facebook est très bon a ce jeu) . Mais ça m’étonnerais vraiment

Est-ce que je pourrais connaitre la nature de ton projet ?