Questions Step by step scrap et dm

[marke]

Bonsoir à tous !
Je débute et il y a encore quelques zones d’ombres dans ma tête concernant certaines subtilité au sujet du scraping et de l’automatisation.

Mon objectif est tout simple :
Je souhaite scraper les facebook id de plusieurs groupes en relation avec mon domaine, pour pouvoir par la suite les dm.

J’utilise donc phantome buster pour scraper.
Et ensuite j’aimerai les dm avec jarvee.

Mais j’ai bien compris qu’il vaut mieux être vigilant et ne pas scraper ni dm avec mon comote principal pour ne pas être bannis.

Il me faudra donc utiliser des faux comptes facebook.
Ces faux comptes enverront des dm dans lesquels il y a le lien de mon produit et de ma page.

Est ce que j’ai tout juste jusqu’à là ?

Je remarque qu’avec phantom buster une fois qu’on installe le pixel il se connecte automatiquement à mon fb principal pour scraper.
Si j’ai bien compris c’est plutôt dangereux.

En réalité, je cherche enfaîte un step by step.
Ex :
Etape 1 : se déconnecter de son fb principal
Etape 2 : activer son vpn 4G
Etape 3: se connecter à son faux compte fb
Etape 4: connecter le faux compte fb a phantome buster en activant l’extension chrome.phantome qui détectera automatiquement le faux compte fb connecté
Etape 5 : télécharger la liste
Etape 6 : allez sur jarvee
Etape 7 : importer la liste d’id fb précédemment scrapée
Etape 8 : envoyer des dm en masse via jarvee en connectant le ou les faux compte.

Je ne sais pas si c’est comme cela qu’il faut s’y prendre et également si il faut utiliser plusieurs faux compte pour scraper et non pas un seul. Et dans le cas ou notre faux compte pour straper saute et qu’on en achète un autre comment faire pour que le second reprenne la ou le premier c’est arrêté (par exemple un groupe de 100k dont j’ai déjà scraper 20k que je souhaite pas rescraper).

Je cherche une video ou une explication step by step pour m’expliquer comment dm par la suite avec jarvee ma liste via mon faux compte ( je ne sais pas si on peut paramètrer plusieurs faux compte 10 ou + pour dm aléatoirement toute ma liste.

[amz]

Hello @marke

En soit c’est pas dangereux de scraper avec ton propre compte mais il faut que tu reste dans dans limites acceptables (daily rate limits) afin d’éviter les blocages, déconnexions ou bans.

Tout dépend du volume ou de l’usage que tu veux accomplir.

Il est important d’avoir une hygienne très rigoureuse en matière de connection et de localisation quand tu collectes de la data et automatise tes comptes.

Tu peux créer plusieurs faux comptes derrière des proxies que tu va warm up quelques semaines avant d’automatiser.

Tu peux par exemple utiliser un navigateur anti fingerprint comme incogniton (free pour 10 profil chrome) qui te permettra de te connecter de manière isolée (browser fingerprint et IP unique derrière un proxy séparé pour chaque compte) pour créer et manager ces comptes.

Il est recommandé de valider ces nouveaux comptes avec de vrais numéros de mobiles. Tu peux te procurrer des packs de cartes sim jetable sur ebay pour 100€ les 50 genre SFR la carte pour valider ses comptes afin d’éviter qu’il soient nukés prémmaturément. Certains utilisent aussi des numéros virtuels comme smspva ou d’autres services. Pratique pour unlocker un compte.

Après avoir créer tes profils, ajoutent manuellement des amis, participe et poste ici et là dans des groupes cibles.

Certains revendent des comptes agés mais je préfère le faire moi même proprement.

Pour les photos tu peux utiliser des services comme thispersondoesntexist puis retravailler la photo pour modifier leur hash car les plateformes scrutent le hash des photos afin de détecter les faux profiles.

Puis apès quelques semaines, tu pourras mettre tes comptes en production pour scraper safe.

Tu peux scraper avec Phantombuster tes listes puis les entrer dans Jarvee pour du dm. Tu peux aussi faire ça avec TexAu (je bosse pour TexAu) qui est une très bonne alternative à PB pour ça. En plus le mois prochain on aura aussi la possibilité d’envoyer des dm FB. Pratique pour mutualiser les tools.

Par ailleurs Phantombuster peut aussi faire du dm FB.

Tu peux scraper les 8k derniers membres de groupe, les posts, les commentaires, les filtres de recherches et bien d’autres chose encore. Puis envoyer des dm à des profils ciblés.

Pour les aspects de sécurité tu peux regarder cetter doc:

Notion – The all-in-one workspace for your notes, tasks, wikis, and databases.

Egalement cet excellent article sur mpsocial bien que rapporté à IG s’applique également à FB:

CatX - The Ultimate Mother / Child Guide + Updated Jarvee Settings - Instagram Marketing - MP Social? (Le forum non officiel de Jarvee)

Donc c’est pas compliqué mais ça requiert une vraie discipline.

Tu peux faire de la rotation de compte avec Jarvee. Ça reste le tool le plus adapté pour ce genre de tâche.

Dans notre v2 en fin d’année on aura la possibilité de faire de la rotation de cookies/compte au sein d’une campagne aussi. On peut faire ça avec une google sheet et un script pour la rotation des cookies mais c’est galère. Jarvee est vraiment le king dans ce domaine.

[marke]

Merci pour ta réponse très détaillé
J’ai trouvé ce tutoriel assez détaillé :

RÉGLAGES JARVEE 2021 TUTORIEL COMPLET FRANÇAIS

sur l’utilisation de jarvee

Penses tu qu’il est plus préférable de scrapper avec phantom buster ou bien jarvee ?
(bien sûr en utilisant : vps + proxy 4G + faux compte FB scrapper )

pour des groupes et pages facebook (de + de 50k membres) afin de les DM par la suite

[amz]

Jarvee peut aussi scraper les groupes FB.
La limite je crois est technique tu ne pourras pas extraire tous les membres de groupe le maximum est autour de 6K-8K membres.

How to use the Facebook contact tool in JARVEE to auto message people

[marke]

Merci amz pour tes retours !
C’est à dire 6-8k membres au total ? pourquoi cette limite ?

Il me semble que dans la vidéo tuto que j’ai envoyé, il parle de 5-6 compte scraper qui tournent
avec un quota par jours pour chaque compte scrapper et des horaires de connexion définis ainsi qu’un délais aléatoire pour chaque groupe d’actions afin de rendre le robot plus humain et pour ne pas qu’il se fasse détecter. Le but est de laisser les comptes scrapper tourner le mois tout entier pour récupérer la totalité du groupe.

Pourquoi cela serait limité à 6-7k membres par groupe ?

[amz]

Tout dépend comment Jarvee scrappe les membres: via les sélécteurs ou via l’API publique FB.
Et ça je ne le sait pas du tout pour Jarvee.
Pour la méthode via l’API c’est 8K environ max.
Les résultats sont aussi dynamiques en fonction des amis FB dans le groupe.

[marke]

Est ce que c’est 8 K :
par compte scrapper ?
par jour ?
par mois ?
et après il se fait bannir c’est ça ?

sur phantom buster il est dit :
Behavior
Nous vous recommandons de traiter un maximum de 4 000 à 5 000 membres par groupe afin de protéger votre compte. Si vous contournez trop cela, vous devrez mettre à jour votre cookie de session plus souvent.
S’il est laissé vide, le Phantom tentera d’extraire autant de membres que possible.

[amz]

8K via l’API c’est le nombre max de profils que tu peux extraire par groupe, peut importe le profil que tu automatise pour le faire.

Exemple: t’as un groupe de 50 000 membres. Tu ne pourras qu’en extraire les 8K les plus récemment ajoutés au groupe (dont tu dois faire parti (ton compte doit être membre du groupe), évidemment)

Phantombuster et TexAu extraient via l’API. Phantombuster peut autour de 4-5K membres, et TexAu 6-8K membres maximum avec cette méthode.

Jarvee, le maximum je ne le sais pas.

[marke]

ok merci ! je vais faire mes recherches et je ferais un retour sur ce groupe.

[amz]

Je pense que la raison première est que Facebook monitore de très près cela et qu’au bout d’un long scroll, ils te déconnectent (le cookie expire prématurément). Je vais demander en interne qu’elle est la raison technique exacte.

[marke]

Merci ! Je vous tiens au courant également !

[amz]

Hello @marke j’ai eu la réponse: c’est le maximum de membres que Facebook montre, donc la limite est imposée de leur côté. Tu ne pourras qu’extraire qu’un maximum de 8K et au delà pour les nouveaux membres.

Donc tu vas scraper les 8K membres les plus récents puis tu pourras scheduler le scrape des nouveaux membres chaque jour.

Mais tu ne pourras pas à une date donnée récupérer plus que 8K (scraper le membres plus anciens au delà des 8000 plus récents à une date donnée).

Voilà.

[marke]

Merci bien amz, c’est très pertinent même si c’est vraiment dommage qu’il n’y ai pas d’autre alternative pour scrapper le reste car 8k sur 100k c’est seulement 8% bonc 92% perdu !
A ton avis, c’est la même limite pour Instagram ?

[amz]

Instagram, tu peux scraper easy des centaines de milliers de followers (détails basiques extraits depuis le modal follower sur le profil ciblé), par contre visiter chacun des followers pour en extraire l’intégralité de la page de profil, c’est super limité peut importe le tool que tu utilise ici. L’avantage de Jarvee ici va être la rotation des comptes pour accélérer la cadence. Mais il te faudra beaucoup de comptes pour aller vite et des proxies 4G évidemment.

Check aussi les autres threads sur le forum, pas mal d’utilisateurs Jarvee ici aussi ;-).

[marke]

c’est super ! oui proxy 4G et VPS obligé et un minimum de 9 comptes en rotation avec une limite journalière de 100 à 300 par jours. Même en un ou deux mois c’est cool.
Non je n’ai pas besoin d’extraire l’intégralité de la page profil, j’ai juste besoin de l’id pour les dm de la publicité.

[amz]

hmmm j’ai un gros doute pour la pub avec les ID, avec un chatbot ou une app Facebook pas de souci mais avec les ID directement pas sûr.

Pour les dm, pas de soucis avec Jarvee, le lien de profile suffira oui.

Si il y a des spécialistes sur la partie adops, je suis preneur.

[marke]

oui dsl je me suis peut être mal exprimé, je compte juste scrapper l’info qui me permettra de les dm. Si c’est le lien du profil et non pas l’id, alors je « scrapperais » le lien. En ce qui concerne les autres informations, cela ne m’intéresse pas forcement.
Penses tu que la limite d’affiche de 8k sur FB est spécifique aux groupes ou cela inclut également les pages (c’est à dire les gens qui ont aimé les pages) ?
Merci pour ton aide !

[amz]

Spécifique aux groupes Facebook.
Mais scraper chaque profile en détail (about section) ça veut dire ouvrir la page, et là la limite est très basse par profil automatisé, pas plus de 40-50 par jour.

[marke]

Donc scrapper les liens profil des gens qui ont liker une page est plus intéressant vu qu’il n y a pas de limite. Donc 100k atteignable.
Ok même 40 / jours c’est très bien si c’est par compte. Si on a 20 compte cela fait 800/jours. Il faudrait quelques mois ou bien des comptes en plus. Reste à voir ce qui est le plus rentable.