大模型驱动的数据清洗与数据合规技术展望

文章预览

导读   近年来，大模型技术热潮中对数据质量的要求提升到了一个新的高度。与此同时，人们也在探索大模型本身能否助力于数据清洗与数据治理等工作。本文将从技术的角度展望大模型驱动的数据治理技术，并分享复旦大学在此领域的一些研究热点。 主要内容包括以下几个部分： 1.  以数据为中心的人工智能 2.  大模型预训练中的数据工程 3.   大模型驱动的数据治理技术 4.  总结与展望 分享嘉宾｜ 李直旭 复旦大学 研究员、博士生导师 内容校对｜李瑶 出品社区｜ DataFun 01 以数据为中心的人工智能 以数据为中心的人工智能，这一理念在 2021 年由吴恩达教授提出，强调了在构建 AI 系统时，对数据的系统化工程处理的重要性。与过去以模型为中心的方法相比，以数据为中心的方法更加注重数据的质量、多样性和治理流程。在早期的机器学习和 ………………………………