S3: 当设置 default_extension 后,文件名中包含点时,会出现"不受支持的扩展名"警告
作者: rospe创建于 2026年9月9日更新于 2026年9月9日
标签bug
描述错误 S3Source.get_fields 使用 pathlib.Path(...).suffix,该函数纯粹是词法函数,返回最后一个句点后的所有内容。对于名字中包含句点的 S3 文件(例如 events.account.update-2026-05-27-<hash>.gz),删除 .gz 压缩后缀后,显示的格式扩展名为 .update-2026-05-27-<hash>。这并不是真正的格式,因此推理器会发出“不支持的扩展名”警告。
内容来源: datahub-project/datahub