Scraping Welcome To The Jungle - balise inspecter ne fonctionne pas

Bonjour à tous,

Je tente de scraper le site Welcome to the Jungle, j’utilise comme URL de base une URL de recherche de métiers.

Mais bizarrement lorsque je scrape en utilisant les balises CSS, soit ça me renvoi un élément vide, alors que la balise existe dans inspecter, soit ça me renvoi un élément différent de ce qui est affiché.

Quelqu’un à une idée de pourquoi ça ne fonctionne pas ?

Merci pour votre aide.

Il me semble qu’ils ont des balises dynamiques, un truc du genre qui empêche de scraper

De mes expériences ça peut provenir de deux choses que la page doit charger dynamiquement avant de récupérer les données du coup tu peux utiliser des outils d’automatisations et des wait … ça marchait dans le passé

une piste ?

1 « J'aime »

Hello,
J’ai un code qui fonctionne bien avec sélénium, avec Claude ou ChatGpt je pense que tu aura rapidement quelque chose de fonctionnel si tu spécifie l’utilisation de sélénium

1 « J'aime »

Salut, c’est bon j’ai trouvé comment faire merci à vous tous et à @howwow

1 « J'aime »