Bonjour,
Je souhaite pouvoir scrapper les informations à droite dans Google pour environ 200 recherches, sauf que je me tape un captcha après 20-30 résultats.
Une solution pour éviter celà ?
Sinon, je vais découper en 10 lots. Mais ça m’intéresse quand-même de savoir.
Merci d’avance
Hello, il existe des solutions comme Scrapy ou ScrapingAnt, des proxy qui te permettent de scraper des pages sans te prendre la tête avec les captchas. Seul petit défaut: le temps de réponse qui va de 6 à 12 secondes par requête, mais tu peux lancer des requêtes en parallèle si tu prends la version payante
Merci pour cette réponse, en fait j’ai vu un post sur le même sujet juste après avoir posté le mien.
J’ai essayé d’annuler la publication, mais trop tard.
Effectivement, il faut des proxy pour changer d’ip dès que Google demande un captcha, donc ça demande une quantité proportionnel de proxy. Dans mon cas, je n’ai pas besoin de beaucoup, donc je vais le faire à la main.