RecurrentGPT: Interactive Generation of (Arbitrarily) Long Text

来自苏黎世联邦理工和波形智能的团队发布了 RecurrentGPT，一种让大语言模型 (如 ChatGPT 等) 能够模拟 RNN/LSTM，通过 Recurrent Prompting 来实现交互式超长文本生成，让利用 ChatGPT 进行长篇小说创作成为了可能。

首先回顾了GPT系列模型的发展历程，然后介绍了ChatGPT模型最重要的技术指令微调，最后介绍了上下文学习。