Octen
免费+付费数据处理 › 爬虫与采集
Agent 爬取 API,支持网页搜索、内容提取、嵌入和 MCP 集成。提供 CLI 工具和 LlamaIndex 集成,可将 URL 转换为 LLM 可用的 markdown。
🎯适用场景:为 AI Agent 提供网页内容抓取和结构化能力
#web-crawl#extract#mcp#agent#search
✅ 优点
- •MCP server 原生支持
- •CLI 工具完善
- •LlamaIndex 集成
⚠️ 限制
- •项目较新
- •社区规模小
加载中...
Agent 爬取 API,支持网页搜索、内容提取、嵌入和 MCP 集成。提供 CLI 工具和 LlamaIndex 集成,可将 URL 转换为 LLM 可用的 markdown。
🎯适用场景:为 AI Agent 提供网页内容抓取和结构化能力