Scraping Apps sur Apps Store & Google Play

Hello la communauté,
Quelqu’un a déjà réussi à scraper toutes les app présentes sur https://apps.apple.com/ ou le Google Play : https://play.google.com/store/apps ?
Si oui, je suis preneur de l’infos de savoir comment ils ont fait.
Merci !

Hello Martin,

Tu estimes le nombre d’app sur chaque store à combien environ ? Possible qu’il y ait des limitations du nombre d’apps affichées par catégorie.

Sinon, c’est peut être jouable en headless browser, tu sais coder un minimum?

A priori sur l’Apple store, il n’y a pas de limitations:
https://apps.apple.com/us/genre/ios-games/id6014?letter=A
Par contre pour Google Play, je ne trouve pas l’annuaire ou la liste de l’ensemble des apps en ligne à télécharger.

Tu veux récupérer quoi comme donnée ?juste le nom des applications ?

J’aimerai avoir le nom de l’application, et les détails sur la page de l’application.
J’ai l’impression que les données sur Google Play Store sont néanmoins plus quali, étant donné qu’il y a une adresse email à chaque fois. Par exemple

Et du coup, est-ce que tu sais coder, et/ou est-ce que tu as à ta dispo une équipe de dev? Si oui, alors tu peux faire pas mal de choses via un script personnalisé.

J’utilise Webscrapio, et ça semble faire l’affaire. Mais je me demande si les apps ne vont voir et bloquer mon ip.
Une idée?

Honnêtement, plutôt que te demander si ça va arriver, lances toi, essayes et testes le système.

Deux cas de figure:

  • si ça passe, très bien tu laisses tourner
  • si ça bloque, tu auras gagné du feedback, tu sauras quelles sont les limites et à partir de ce moment là on pourra réfléchir à comment contourner les blocages

Mais en attendant, si Webscraper fait le job, go go :slight_smile:

1 « J'aime »

Merci pour ta réponse.
Je vais aller tester. :wink:

Pour scrapper les commentaires c’est une autre histoire. Vu que la version web de apps.apple.com ne donne qu’un aperçu des commentaires d’une appli donnée