人工智能(AI)研究人员一直在开发和完善大型语言模型(LLM),这些模型在各种领域和任务中表现出非凡的能力,挑战了我们对学习和认知的理解。OpenAI开发的最新模型GPT-4是使用前所未有的计算和数据规模进行训练的。本文报告了对早期版本的GPT-4的调研,当时它仍由OpenAI积极开发。我们认为(这个早期版本)GPT-4是新一代LLM的一部分(例如ChatGPT和谷歌的PaLM),它们比以前的人工智能模型表现出更多的通用智能。讨论了这些模型不断提高的能力和影响。证明了GPT-4除了对语言的掌握外,还可以解决跨越数学、编码、视觉、医学、法律、心理学等新颖和困难的任务,而不需要任何特别的提示。此外,在所有这些任务中,GPT-4的性能惊人地接近人类水平的性能,并经常大大超过之前的模型,如ChatGPT。鉴于GPT-4能力的广度和深度,我们相信它可以被合理地视为人工通用智能(AGI)系统的早期(但仍不完整)版本。在对GPT-4的探索中,特别强调了发现其局限性,并讨论了向更深入、更全面的AGI版本前进的挑战,包括可能需要追求一种超越下一个字预测的新范式。最后,反思了最近技术飞跃的社会影响和未来的研究方向。

成为VIP会员查看完整内容
177

相关内容

【ChatGPT系列报告】AIGC行业应用畅想,22页ppt
专知会员服务
145+阅读 · 2023年3月28日
【ChatGPT系列报告】ChatGPT的宏观视角,41页ppt
专知会员服务
123+阅读 · 2023年3月21日
【ChatGPT系列报告】GPT-4及ChatGPT相关应用梳理,33页ppt
专知会员服务
313+阅读 · 2023年3月19日
持续学习最新综述论文,29页pdf
专知会员服务
117+阅读 · 2021年4月22日
自然语言处理现代方法,176页pdf
专知会员服务
263+阅读 · 2021年2月22日
Transformer打开了通用人工智能的一扇门?
THU数据派
2+阅读 · 2022年6月2日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Arxiv
129+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
320+阅读 · 2023年3月31日
Arxiv
11+阅读 · 2021年12月8日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
微信扫码咨询专知VIP会员