2023年世界人工智能大会期间，蜜度主办了语言智能与内容生成高峰论坛。硅谷人工智能研究院创始人皮埃罗·斯加鲁菲以《Transformer模型——新型内容生成计算架构》为题作主旨演讲

2023年最具热度的科技新闻非GPT莫属，引发这股全球热潮的GPT背后支撑是什么？它在现在以及将来，又会对我们的生活产生怎样的变革？7月7日，在语言智能与内容生成高峰论坛上，硅谷人工智能研究院创始人皮埃罗·斯加鲁菲以《Transformer模型——新型内容生成计算架构》为题作主旨演讲，他以GPT为切入点同与会嘉宾分享了对Transformer模型的前沿洞察。

世界人工智能大会是全球人工智能领域最具影响力的行业盛会之一。作为2023世界人工智能大会的一项重要日程，蜜度主办了本届大会的语言智能与内容生成高峰论坛。

皮埃罗·斯加鲁菲是硅谷人工智能研究院（SVAIRI）创始人、也是《硅谷百年史》与《人类2.0》的作者。硅谷人工智能研究院整合了全球最顶级的人工智能领域的科学家、企业家、哲学家、创业者、投资者，共同讨论人工智能技术演变趋势、社会影响与商业化进程等，致力于促进人工智能领域全球范围内研究机构与企业的深度合作，并向全球工商业与政府机构提供人工智能发展的咨询与建议。

自谷歌于2017年推出‘Transformer’架构之后，语言模型的发展呈爆炸性增长，皮埃罗·斯加鲁菲指出，Transformer模型是新型计算机架构，作为一种通用架构，用于训练计算机学习解决各种不同问题。它采用了自注意力机制和位置编码来处理序列数据，摒弃了传统的循环神经网络结构，是一种能够分析任何类型序列的模型，不仅限于文字，还包括图像。

皮埃罗·斯加鲁菲认为，与那些低水平的体力活如建筑工人、水暖工人、服务员相比，拥有学士、硕士和专业学位的人更容易受到大型语言模型和通过其开发的软件的影响，比如编程和写作技能。他表示，这种影响还有另一半：一些工作受到影响的同时，还有一新的工作将被创造出来。

演讲中，皮埃罗·斯加鲁菲还从“大型语言模型和工作”“生成式人工智能应用”“聊天机器人与教育”“生成式人工智能模型与文科”等方面展望了聊天机器人的未来。