首页 > 风控 > 正文

王海峰首谈文心一言背后研发故事:技术创新就是要挑战没人做过的事

2023-08-28 16:43:56来源:新华网  


【资料图】

近日,深度学习技术及应用国家工程研究中心主任、百度首席技术官王海峰做客CCTV-10《创新中国说》,展示大语言模型文心一言的能力,阐述人工智能技术原理、重大战略意义及产业应用。从技术创新到产业落地,抽丝剥茧,为观众揭秘人工智能。

节目中,文心一言作为“特殊嘉宾”登台,先是为《创新中国说》生成了一篇片花词,简短精炼有文采,随后还为节目绘制了一张海报,科技感十足。文心一言顺利完成任务,背后的技术原理是什么?

据了解,文心一言是百度自主研发的知识增强大语言模型,能够根据用户的输入,生成符合需求的内容。

王海峰介绍,从技术原理上讲,首先基于深度神经网络,融合海量数据和知识,进行知识增强的学习,得到预训练大模型。然后采用有监督精调、人类反馈的强化学习、提示等关键技术,让大语言模型生成的内容更符合人的规范、习惯和价值观。文心一言具备知识增强、检索增强、对话增强等独特技术优势,生成内容准确性更高、时效性更好、逻辑更清晰。

王海峰把文心一言的研发类比为参加奥运会,他认为技术创新过程就是要挑战没人做过的事。

如今,这一目标已在文心大模型的迭代升级中离我们越来越近。据悉,文心一言的基础模型已升级到文心大模型3.5,训练速度达到原来的3倍,推理速度达到原来的30多倍。

王海峰指出,纵观人类经历的三次工业革命,其核心驱动力量机械技术、电气技术和信息技术都有很强的通用性,当它们呈现出标准化、自动化和模块化的工业大生产特征,核心技术就进入工业大生产阶段。“当前的人工智能技术也具有很强的通用性,显现了标准化、模块化、自动化的特征。人工智能已经进入工业大生产阶段,广泛应用于各行各业,成为科技革命和产业变革的重要驱动力量。”

随着文心一言进一步落地,这类大语言模型会成为一个通用的赋能平台,金融、能源、媒体、政务等各行业各领域都可以基于文心一言实现智能化变革,提高效率,推动我国人工智能产业加速发展,促进科技进步、产业升级和生产力整体跃迁,为我国经济高质量发展注入动能。

关键词:

责任编辑:hnmd003

相关阅读

推荐阅读