Agent
DataFuel
把网站变成 LLM 可直接使用的数据
访问官网
访问方式:付费
它是什么
DataFuel 通过 API 抓取整个网站和知识库,并输出干净的 Markdown 结构化数据,供 RAG 系统和 AI 模型使用。它支持访问需要登录的受保护内容,并提供 Markdown、JSON、TXT、HTML 等输出格式。其 GPT-4 驱动的提取功能可按自定义 JSON schema 抽取结构化数据。
典型使用场景
- 为 RAG 应用收集网页数据
- 构建 LLM 训练数据管道
- 从多个网页来源构建知识库
- 抓取技术文档和 API 参考
- 采集受登录保护的内容
工具信息
- 访问方式
- 付费
- 分类
- Agent
- 标签
- 网页抓取 · RAG · LLM 数据 · 结构化数据 · Markdown · coding · rag-knowledge-tools
细分分类: RAG 知识库工具