一个在不同爬虫提供商之间进行故障转移的 fetch 扩展

作者: scarsam创建于 2026年9月18日更新于 2026年9月18日

`extensions/firecrawl/install.sh` 将 Firecrawl 设置为获取层。本周测试到的影响它的问题是:Firecrawl v2 的爬虫返回相同的 HTTP 500 `SCRAPE_ALL_ENGINES_FAILED`,对于目标 404、503、429 和封锁页面。状态中没有相关信息,因此阅读它的技能无法区分“已删除”和“被封锁”。

内容来源: AgriciDaniel/claude-seo