跳到正文
AWS Machine Learning Blog· Khaled Thabit·· 9 天前精选AI 评分63

Property Finder 在 Amazon Bedrock 上修复评测偏差并用 Llama 4 Maverick 17B 降低 86% 成本

Fix evaluation bias to unlock better models on Amazon Bedrock

AI 导读

Property Finder 与 AWS Generative AI Innovation Center 发现其 96.8% 的评测标签直接继承自现有 VLM 的预测,导致替代模型被系统性低估。

推荐理由

文章指出用现有模型预测充当标注会扭曲模型对比,并给出重建专家标注与演化式提示词优化的可迁移方法。

来源:AWS Machine Learning Blog · aws.amazon.com