Bonjour à la communauté,
Armé de l’extension Chrome Webscraper, je tente de scraper le site suivant : https://industrie.usinenouvelle.com/
Je rencontre une difficulté au niveau de la pagination qui semble être du JS. Voir pièce jointe.
Savez-vous si je peux gérer ce cas de figure avec Webscraper et si oui comment ?
Merci pour votre aide et au plaisir d’échanger !
Romain
Hello,
Sur Webscraper, je vois 3 solutions,( je n’ai pas accès au site car il faut s’enregistrer et attendre leur retour).
1 - Mettre en dur le nombre de pages via l’url si la pagination est affichée. A mettre dans le start URL du Sitemap
exemple : http://tonlien/page=[0-75].
2 - Lister tous les items de la pagination comme lien. En utilisant comme type dans webscraper Link (et multiple).
3 - Faire un clic sur le bouton next , surement possible avec la class icon-next .
@dispo si besoin,
Cdt
Matthieu
Moi, je créerai un élément/clic
dans le premier tu selectione les URL de pages,
Dans le deuxième(clic) tu sélectionnes le bouton next.
Et tu joins la route vers ta route principale.
Pour le reste tu sélectionnes les URL, entre dans chaque page et scrappe ce dont tu as besoin.
Merci pour vos retours rapides ! Je regarde si j’arrive à quelque chose en suivant vos conseils et je vous tiens au courant.
Romain
