Property Finder修正Bedrock模型评估偏差
热点事件持续更新
Property Finder修正Bedrock模型评估偏差
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Property Finder发现,其视觉模型评估标签中96.8%直接来自现有视觉语言模型的预测,而非人工核验,导致替代模型在对比中天然处于劣势。团队重新人工标注356张阿联酋房产图片,改用多标签分类,并在Amazon Bedrock上通过v0至v27的提示词迭代完成选型,称最终准确率更高、成本降低86%。 据AWS Machine Learning Blog,该86%是与Property Finder此前使用v21提示词的方案成本估算相比;评估集包含256张开发图片,两个模型的提示词均在这些图片上调优,因此相关分数偏乐观。
AI 根据报道生成 · 2 小时前更新
最新进展10月28日 00:53
Property Finder 如何修正 Amazon Bedrock 上的评估偏差,以 86% 更低成本选出更优视觉模型报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- AWS Machine Learning BlogProperty Finder 如何修正 Amazon Bedrock 上的评估偏差,以 86% 更低成本选出更优视觉模型
Property Finder 发现其评估标签中 96.8% 直接来自现有视觉语言模型的预测而非人工核验,导致任何替代模型在对比中天然处于劣势。团队重新人工标注 356 张 UAE 房产图片并改用多标签分类,再通过 v0 到 v27 的提示词迭代优化在 Amazon Bedrock 上选型,最终实现更高准确率且成本降低 86%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。