首页 > 活动线报 > 每日福利 > AI“数据荒”怎么办?微软、谷歌等公司正使用“合成数据”训练AI

AI“数据荒”怎么办?微软、谷歌等公司正使用“合成数据”训练AI

发布时间:2024-05-12 22:22:47来源: 15210273549

5月12日讯(编辑 周子意)人工智能聊天机器人的背后需要海量高质量数据作为支撑。传统上,人工智能系统依赖于从各种网络来源(如文章、书籍和在线评论)中提取的大量数据来理解用户的查询并生成响应。

长期以来,如何获取更多的高质量数据成为人工智能公司的一大挑战。由于数据在互联网上的可用性是有限的,这促使人工智能公司正寻求一种替代解决方案——合成数据(Synthetic data)。

合成数据,即人工智能系统生成的人工数据。科技公司通过利用自己的人工智能模型,生成合成数据(这也被认为是虚假数据),然后将这些数据用以训练其系统的未来迭代。

谈及合成数据是如何生成的,其过程包括为人工智能模型设置特定参数和提示以创建内容,这种方法可以更精确地控制用于训练人工智能系统的数据。

例如,微软的研究人员向人工智能模型列出了四岁孩子能够理解的3000个词汇,然后,他们要求该模型使用词汇表中的一个名词、一个动词和一个形容词来创造一个儿童故事。通过几天时间内数百万次的重复提示,模型最终产生了数百万个短篇故事。

虽然计算中的合成数据并不是一个新概念,但生成式人工智能的兴起促进了大规模创建更高质量的合成数据。

人工智能初创公司Anthropic首席执行官Dario Amodei将这种方法称为“无限数据生成引擎”,旨在避免与传统数据采集方法相关的一些版权、隐私等问题。

现有用例与分歧观点

目前,Meta、谷歌和微软等主要人工智能公司已经开始使用合成数据开发高级模型,包括聊天机器人和语言处理器。

例如,Anthropic使用合成数据为其聊天机器人Claude提供动力;谷歌DeepMind则使用这种方法来训练能够解决复杂几何问题的模型;与此同时,微软已经公开了使用合成数据开发的小型语言模型。

有支持者认为,如果适当实施,合成数据可以产生准确可靠的模型。

然而,一些人工智能专家对与合成数据相关的风险表示担忧。著名大学的研究人员观察到了“模型崩溃”的例子,即在合成数据上训练的人工智能模型出现了不可逆转的缺陷,并产生了荒谬的输出。此外,有人担心合成数据可能会加剧数据集的偏差和错误。

剑桥大学博士Zakhar Shumaylov在一封电子邮件中写道,”如果处理得当,合成数据会很有用。然而,对于如何才能处理得当,目前还没有明确的答案;有些偏见对于人类来说可能很难察觉。”

此外,围绕对合成数据的依赖存在一场哲学辩论,人们对人工智能的本质提出了质疑——如若使用机器合成的数据,那么人工智能是否还是模仿人类智能的机器?

斯坦福大学教授Percy Liang强调了将真正的人类智能融入数据生成过程的重要性,并强调了大规模创建合成数据的复杂性。他认为,“合成数据不是真实的数据,就像你做梦登上了珠穆朗玛峰并不是真正登顶了一样。”

目前对于生成合成数据的最佳做法尚未达成共识,这突出表明需要在这一领域进一步研究和发展。随着该领域的不断发展,人工智能研究人员和领域专家之间的合作对于充分利用人工智能开发合成数据的潜力至关重要。

每日福利更多>>

消息称一汽丰田总部迁天津,不愿意去的员工最高 N+7 补偿 配新蓝鲸2.0T+爱信8AT,长安CS75 PLUS Ultra 13.19万起售 宁德时代发布磐石底盘 时速120撞击不起火 想买MPV的等等,比亚迪夏即将上市,“冰箱、彩电、大沙发”都有 魏建军:坚守长期主义和底线思维,才能行稳致远 长安汽车荣获碳达峰领跑者企业,科技创变打造“数智新汽车” 看看领克Z20、Model Y、宝马iX1,谁才是Z世代的心头好 问界M8黑色版本曝光!颜值比M9还高,想买理想L8的再等等? 美观野性配置足,最接地气的方盒子吉利牛仔太原上市 网上没赢过,现实没输过——丰田在华60年经历了哪些? 以过度配置打造越级体验,ID.与众重塑15万级纯电SUV“黄金标准” 宁德时代磐石底盘,如何让车企“新车套壳就下线”? 领克版“路虎揽胜”再曝新图,看完颜值,网友:卖40万必爆款 两款澳洲五星安全皮卡大PK:长城山海炮VS全新悍途,谁更强? 小鹏G9全系23.39W起!还看什么小米、特斯拉? 又是一个998 低成本高性能 吉利雷达金刚皮卡能掀桌子吗? 年终岁末大场面,鸿蒙智行四界齐聚央视直播间 秦L降价了!2025年车市价格战酝酿中,但买车有福了? 72小时深度体验MG ES5机会来了!MG ES5“想开了,不试不嫁”试驾启动 下一代G50 3系渲染图!新世代设计语言会是什么样? 15万级的子品牌电车,小鹏Mona M03和萤火虫精品小车怎么选 蔚来李斌:到2035年 全球前十车企至少有一半是中国的 2025年自主或超德系,成豪华车市场最大系别 阿维塔三车系升级AVATR.OS 4.1.4:智能驾驶与车机体验全面提升 比亚迪香港特区新能源车销量破万,海豹车型成新里程碑 长安飞行汽车首飞成功!在重庆“打飞的”,梦想快要照进现实了? 徐长明:双政策拉动150万辆国内消费,汽车出海前景广阔 没有卖不好的车,只有不合适的价格!别克微蓝6已跌破9万? 四大品牌齐发力,2025年长安系多款重磅新车要上 长安汽车豪掷千亿,飞行汽车与人形机器人双翼齐飞!