一、GPT-3展现了语言生成、上下文学习以及丰富世界知识等三大重要能力。这些能力来源于大规模预训练,使用了3000亿单词的语料和1750亿参数的模型。其中语言生成的能力来自于语言建模的训练目标,上下文学习则遵循给定任务的几个示例来生成解决方案。除此之外,GPT-3还拥有事实性知识和常识等世界知识,使得它在语言处理方面表现得出色。