hw910B NPU显卡t2v效果复现问题

Author: ljrproccCreated Apr 13, 2024Updated Jul 25, 2025

你好!感谢你们为文生视频开源工作的付出!目前我在华为 910B显卡上运行scripts/text_condition/sample_video.sh的推理工作,按examples/prompt_list_0.txt的prompt list上运行推理并复现效果,主要存在以下问题: (1)17x256x256的生成较为正常,可复现结果。 (2)65x256x256随机存在部分Prompt(约2/16)的视频生成失败(即生成单调颜色),且失败的prompt随随机种子的变化而变化。 (3)65x512x512存在更多Prompt(约3/16-4/16)的视频生成失败,且成功的部分视频patch之间的间隙较为明显。 请问大概是什么原因?是权重加载未完全的原因,还是代码框架与NPU底层架构的适应性问题?期待与您的讨论!

Source: PKU-YuanGroup/Open-Sora-Plan