跳到正文
实时
热点事件历史事件

AWS Bedrock 评估偏差修复

1 篇报道1 个报道来源22 天前更新

先了解这件事

AI 综述

Property Finder 在 Amazon Bedrock 上发现评估数据集存在偏差,96.8% 的标签来自单一模型预测,影响新模型客观比较。该公司通过人工标注 356 张图像构建基准数据集,并采用进化式提示优化,在保持 86% 准确率的同时将成本降低 86%。

AI 根据报道生成 · 更新于 22 天前

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. AWS Machine Learning Blog
    Property Finder 如何在 Amazon Bedrock 上识别评估偏差并优化模型成本

    Property Finder 在迁移视觉 AI 工作负载至 Amazon Bedrock 时发现其评估数据集 96.8% 的标签来自单一模型的预测而非人工验证,导致新模型客观比较受阻。该公司通过人工专家独立标注 356 张图像构建可信基准数据集,并采用进化式提示优化迭代 27 次后,在保持 86% 准确率的同时将成本降低 86%。