Scrapoxy : un agrégateur de proxy

Scraping
1

Hello,

Je voudrais vous présenter Scrapoxy, un outil gratuit et opensource que je développe depuis 7 ans.

Scrapoxy est un agrégateur de proxies qui gère le traffic et les proxies intelligement (ban). Il simplifie la gestion en centralisant l’endpoint du proxy pour vos scrapers, plutôt que de jongler avec de multiples providers… Et il a des fonctionnalités comme la sticky session intégrée, des stats, un monitoring des proxies, etc.

L’outil peut être installé en local (via Docker ou npm). Il gère les cloud comme AWS, GCP, DigitalOcean, Azure et OVH pour créer vos propres proxies DC. Il configure automatiquement les VM et gère le start/stop ~ Ya juste à regarder ~ Il s’occupe de faire rotate les IPs et gère même l’auto-scaling (il arrête le pool si ya pas de traffic)

Je serais ravi de répondre à vos questions ou de faire une demo :slight_smile:

13 « J'aime »
2

Très cool ça et open source (1,7K :star:) ! Bienvenue sur le forum :ok_hand:

Je vois ton outil un peu comme un waterfall proxy ! D’ailleurs tu pourrais t’inspirer de fullenrich pour ta landing, je pense que reprendre cette idée de waterfall, ça permettrait d’être plus visuel pour présenter ton outil.

Par contre ça manque un peu d’intégration. Sur le forum, tu as les fondateurs de scrapingbee (@ksahin) et piloterr (@josselin), sinon je pense aussi à Bright, Oxy, Zenrows…

3 « J'aime »
3

J’étais avec Fabien ce matin justement :slight_smile: Solution vraiment top pour ceux qui font du scraping comme nous!

3 « J'aime »
4

Super idée pour la landingpage. Je suis preneur d’idées car le design est important. D’ailleurs, quel framework me conseillez-vous ? (la landing page est en vitepress)

Je suis preneur aussi d’autres exemples cool.

Concernant les connecteurs, Scrapoxy va prochainement supporter BrightData. Discussion en cours avec les autres :slight_smile:

2 « J'aime »
5

En no-code :

Il y a des templates ici Free & Premium SaaS Website Templates — Framer Marketplace pour l’effet woauh. Je suis d’accord avec @Camille pour qu’il y a du wording sur « waterfall proxy ».

1 « J'aime »
6

La on est sur un truc de haut niveau, le produit est génial, gg a vous

1 « J'aime »
7

J’aime bien le terme Waterfall Proxy. J’ai retrouvé ça chez Scrapeops => Scrapy Proxies - Waterfall Requests Over Multiple Proxies | ScrapeOps

2 « J'aime »
8

Tu pourrais même rebrand en proxyfall =)

1 « J'aime »
9

Je suis tombé sur ce post LinkedIn, ça m’a fait penser à ce post car ça serait peut-être intéressant pour la partie image animée sur ton site (c’est aussi une note à moi-même)

1710934963948

Il l’a fait avec Figma + Plugin Motion UI

Et Fullenrich ont fait la leur avec ça :

5 « J'aime »
10

top je prend :slight_smile: merci pour les conseils

1 « J'aime »
11

Hello, la version 4.7.0 supporte désormais BrightData (ISP + DC). Enjoys!

4 « J'aime »
12

Est-ce que tu connaîtrais un outil similaire pour les proxies qui autorisent le traffic smtp (ie. pour la verification d’emails)? J’ai énormément de mal à en trouver…

13

V6proxies proxy SMTP port 25 open. C’est cadeau !

1 « J'aime »
14

Hello, non je ne connais pas pour la partie SMTP.

15

Wow incroyable merci Thomas! Par hasard tu sais où ils sourcent leurs proxies?
J’ai trouvé ça sur blackhatworld aussi: https://localproxies.com/
Mais j’ai des doutes par rapport à la légalité de leur système :stuck_out_tongue:

16

En même temps quand tu commences à chercher des proxys qui ont le port smtp ouvert…:joy::joy::joy: