在 Rust 中爬取和抓取网页
voyager ===========================
使用 voyager，您可以轻松从网站中提取结构化数据。使用 voyager 遵循状态机模型编写自己的爬虫/抓取器。
根据附加到 response 的状态，您可以向爬虫提供新的 URL，也可以不附加状态。抓取操作使用 causal-agent/scraper。
有时可能有必要先执行一些其他调用,获取令牌等,您可以向爬虫提交 async 闭包,以手动获取令牌。
暂无开放 Issues，或尚未同步最近议题。