Hello !
Je cherche un modèle qui me permettrait de mettre une URL en entrée avec un prompt pour pouvoir récupérer des infos sur un site web, sous forme d’API.
En gros ce que fait Bard ou Chat GPT avec Browse with Bing.
Je vous ai mis un screen du genre de recherche et de résultats que j’aimerais avoir
J’ai du mal à trouver ça, vous auriez quelque chose du genre ?
Merci beaucoup !
Hello, pour ça tu peux utiliser langchain avec soit les agents => https://js.langchain.com/docs/modules/agents/ en ajoutant un tool dessus de scraping (cheerio ou puppeteer) => https://js.langchain.com/docs/modules/indexes/document_loaders/examples/web_loaders/, et renvoyer ça sur un endpoint.
Tu peux aussi faire ça de manière juste contraint en faisant le workflow directement (les agents c’est un peu comme laisser un gosse avec ta CB à jouéclub), scraper puis push à openai les tokens correspondant à la page, ça te permettra de faire un premier clean du raw html qui prend du poids (et donc des tokens et donc de la thune)
Réponse un peu dérivé vu que tu demandais un truc clé en main, mais au cas où 
Merci pour ton retour ! Passage obligé par du scrap tu penses ? Je voulais justement éviter d’avoir à balancer trop de contexte ahah
Oui, après vu la pléthore de tools qui pop de partout il y a surement un tool qui fait ça! mais bon autant le faire soit même
Pas essayé @P2C, mais ça m’a fait penser à ton besoin et notamment le 1er qui semble le proposer clairement :
Ce sujet a été automatiquement fermé après 730 jours. Aucune réponse n’est permise dorénavant.
