Je cherche à scrapper Google et récupérer les 50/100 premières requêtes.
Pour se faire, j’utilise Zennoposter avec la technique Google Alert + Google Translate. Cela fonctionne bien cependant je me fais bannir au bout d’un moment.
Le problème c’est que ce n’est pas réellement moi qui me fait bannir mais bien Google qui bannit sa propre IP.
Avez-vous une idée pour que je puisse réaliser ce scrap sans être bloqué ? Dans l’idée j’ai 250k mots clés à rechercher mais pas sur une seule journée, cela peut être étalé dans le temps.
J’ai un abonnement Hidemyass mais même en changeant d’ip une fois bloqué, je le suis toujours car Google passe toujours par sa même ip pour retourner les résultats Google Alert et donc ça ne change rien
Par ailleurs, sur ZennoPoster j’ai mis une liste avec mes URLS avec suppression de la ligne prise + sauvegarde des modifications apportées au fichier cependant je rencontre un problème.
Lorsque je lance une vingtaine de threads, j’ai des URL qui sont traitées en double ou triple. Avez-vous ce problème sur la gestion des threads par ZennoPoster ?
