Scraping just-mining.com

Bonjour à tous,

pour les besoins de mon comparateur de staking

je me demande si quelqu’un aurait une idée de comment bypasser cloudflare pour scraper les données de cette page https://www.just-mining.com/staking

J’ai essayé

  • avec puppeteer et le stealth plugin
  • directement avec axios

Et ca ne fonctionne que si je passe dans les cookies un cf_clearance qui ne fonctionne que 30 min.

Merci d’avance pour vos insights :slight_smile:

Hello,

tu peux utilisé DataMiner

voici le résultat.
JustMining stacking - Google Spreadsheets

dispo pour de la crypto :wink:

Merci beaucoup.

J’aurais du préciser que j’ai pas besoin d’un one time, mais je dois faire cette requete toutes les heures. Et depuis un serveur linux donc au mieux avec un browser headless.

désolé l’ami, cela dépasse mes compétences, parcontre je peux te mettre en relation avec un dev

Merci et ben tu peux lui montrer ce post si ça te va :slight_smile: