专栏名称: DeepTech深科技
“DeepTech深科技”是与麻省理工科技评论官方独家合作的一个新科技内容品牌。我们专注于关注三个方面:1、基于科学的发现;2、真正的科技创新;3、深科技应用的创新。
今天看啥  ›  专栏  ›  DeepTech深科技

专治AI偏见,MIT新技术让数据处理更公平

DeepTech深科技  · 公众号  · 科技媒体  · 2024-12-19 15:30
    

文章预览

  (来源:MIT News) 机器学习模型在进行预测时,可能会出现偏差,尤其是在数据集中某些群体的代表性不足的情况下。 举个例子,一个用于预测慢性病患者最佳治疗方案的模型,可能是在一个主要包含男性患者的数据集上训练的,当这个模型被应用到医院时,它可能会对女性患者做出不准确的预测。 为了改善预测结果,工程师通常会通过移除一些数据点来平衡训练数据集,直到所有子群体的代表性相对均衡。虽然这种数据集平衡方法有潜力,但它通常需要删除大量的数据,这可能会影响模型的整体表现。 近期,MIT 的研究人员开发了一种新技术,能够识别并移除那些对模型在少数群体中表现不佳贡献最大的训练样本。与其他方法相比,这项技术只需删除较少的数据点就能保持模型的整体准确性,并且在少数群体中的表现得到显著改善。 此外, ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览