近日,前OpenAI科学家 Andrej Karpathy 在社交媒体上提出了一个关于大模型学习的新颖观点:当前我们可能缺失了一种主要的学习范式。他认为,除了现有的预训练(用于获取知识)和微调(监督学习化学习,用于形成习惯性行为,遵从指令)之外,LLM还需要一种新的学习方式,他暂称之为“系统提示学习”(system prompt learning)。