使用 CrewAI 或 LangChain 等框架构建 AI Agents 经常会遇到瓶颈: 沉重而缓慢的网络刮去会 bloat上下文窗口并增加 LLM 符号成本.
为了解决这个问题,我建造了Smart Scraper M2M——一种轻量级,高性能的网络刮取器API,专门设计用于机对机(M2M)通信.
QQ 关键特性 QQ 超快: 在 QQ 上下文优化中返回结构干净的 JSON : 剥出无用的 HTML/ CSS 垃圾, 所以您的 LLM 仅处理相关的数据 。 🤖 对代理友好:构建为无缝地融入CrewAI,LangChain,或自定义Node.js代理.
QQ 快速启动 您可以在 GitHub 上直接测试 API 或检查完整源代码: QQ GitHub Repository : https://github.com/MRIGL/smart-scraper-m2m 我积极改进 API 并乐于听到您的想法、特性请求或贡献!
随你便 来拍回放 或者下面留个评论.