Claude-api evals: 1/sqrt(n·reps) 将 reps 视为额外的情况,因此在更高的 reps 值时,噪声底线会被低估
作者: mavericksea-ai创建于 2026年10月1日更新于 2026年10月1日
eval 文件中添加的指南在 #1930 (`skills/Claude-api/shared/evals/`) 中将噪声底线设置为 `1/sqrt(n·R)` (n 个案例, R 次重复),并将案例和重复次数视为可互换的:
内容来源: anthropics/skills