Quand on scrap certains sites (Google par exemple), il semble que le site detecte mon fingerprint, c’est a dire un truc plus bas niveau que le user-agent. Car j’ai beau changer mon IP et mon user-agent, je continue de me faire flag. Je scrap avec Puppetteer. Vous avez des idees ou des recos pour changer le fingerprint et arriver a bypasser la protection ?
Si tu veux aller encore plus loin, utilise l’option de lancement --user-data-dir pour conserver les données entres les crawls, si ton navigateur est blindé de cookies cela passera mieux
Autre tip que j’utilise de tant en temps, installe aléatoirement des extensions chrome au lancement pour te fondre dans la masse (adblock, ublock, lastpass, gramarly, des trucs randoms du chrome store, …)
Pour les scraping plus avancés, voire de véritables bots, mets des temps de pause random entre tes actions, scroll la page, clique sur des liens, les pubs, …