在处理空/无效 HTML 内容时, trafilatura 发生分段错误(403 个响应)
作者: milesian01创建于 2025年3月13日更新于 2026年7月25日
**描述:** 在使用 Google 搜索引擎运行 STORM 流程时,一些 URL(返回 403 Forbidden)提供了空的或格式不正确的 HTML。trafilatura 会记录“解析树长度:0,错误的数据类型或无效 HTML”等错误,然后最终会因内存损坏错误("corrupted size vs. prev_size"、"double free or corruption (out)")而崩溃,导致分段错误。
内容来源: stanford-oval/storm