埃隆马斯克也认为用于训练AI的真实世界数据所剩无几 未来只能靠合成数据
埃隆马斯克的观点与其他人工智能行业专家的观点基本相同,那就是用于训练人工智能模型的真实世界 (区别于机器生成) 数据已经所剩无几。
本周埃隆马斯克与 STAGWELL 董事长在 X/Twitter 进行直播时埃隆马斯克表示,我们现在基本上已经耗尽人类在人工智能训练方面积累的全部知识,这基本上发生在 2024 年。
有鉴于人类自己产生的数据已经被耗尽,所以埃隆马斯克认为合成数据也就是由人工智能模型本身生成的数据是未来的发展方向,补充的唯一方法就是使用合成数据,有了合成数据后人工智能就会自我评分并经历自我学习的过程。
值得注意的是由于无法获取到最后多的真实世界新数据,包括埃隆马斯克的 xAI、微软、Meta、OpenAI 和 Anthropic 等科技巨头都已经开始使用合成数据训练 AI 模型。
市场调查公司 Gartner 的预计则是在 2024 年用于人工智能和分析项目中的数据可能有高达 60% 都是合成的而非人类产生的真实数据。
微软在最新推出的 Phi-4 系列模型中也同样使用合成数据和真实数据进行训练,谷歌开源的 Gemma 模型同样如此,都是靠合成数据才完成模型的最终训练。
使用合成数据的优点很多,包括获取方式相对来说比较容易、节省成本还可以规避某些版权问题等。但缺点也很明显,某些研究表明合成数据可能会导致模型崩溃,即模型的输出不那么有创意而且会更加偏颇。
如果用于训练的合成数据本身存在偏见和局限性,那么训练出来的人工智能模型也同样会存在这样的缺点或受到影响,最终影响到人工智能模型的质量。
-
微软身份验证器自动填充和密码保存将在6月起逐渐停用 附密码迁移方法
2020 年微软更新身份验证器 (Microsoft Authenticator) 带来密码保存和自动填充功能,也就是微软身份验证器当时变成密码管理器,并且支持在 iOS 和 Android 上实现自
-
亚马逊AWS继续保持先发优势:AWS单季度利润超过微软云和服务器业务总和
微软已经在服务器领域深耕 30 年,尽管目前 Linux 系统和开源数据库软件非常受欢迎,但很多企业仍然使用 Windows Server 和 SQL Server,企业使用这些软件需要向微软支付授权
-
微信打击利用本地数据打造AI分身或数据分析应用 开发者需当心法律风险
目前在 GitHub 上有诸多开源项目可以获取并解密微信客户端本地数据,解密的数据再喂给人工智能就可以实现打造 AI 分身或数据分析等应用,但现在微信要开始打击这类应用了。微信安全中心日前发文《针对违
关注公众号:拾黑(shiheibook)了解更多
友情链接:
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
安全、绿色软件下载就上极速下载站:https://www.yaorank.com/

随时掌握互联网精彩