AWS Machine Learning Blog· Khaled Thabit·· 9 天前精选AI 评分63
Property Finder 在 Amazon Bedrock 上修复评测偏差并用 Llama 4 Maverick 17B 降低 86% 成本
Fix evaluation bias to unlock better models on Amazon Bedrock
AI 导读
Property Finder 与 AWS Generative AI Innovation Center 发现其 96.8% 的评测标签直接继承自现有 VLM 的预测,导致替代模型被系统性低估。
推荐理由
文章指出用现有模型预测充当标注会扭曲模型对比,并给出重建专家标注与演化式提示词优化的可迁移方法。
来源:AWS Machine Learning Blog · aws.amazon.com