ChatGPT：未来互联网上的「影子写手」(2)

「你的父母给你讲了关于我和我的精灵的故事，以此给你的童年带来欢乐和魔法。他们希望你相信其中蕴含的精神和假日的魔力。」
文中充满感情地写道，「父母对你的爱和关心是真实的。他们为你创造了美好的回忆和传统，希望你的童年变得特别。」
两则「圣诞」的故事，实际上突显了 ChatGPT 作为新一代「聊天生成预训练转换器」的真正能力：尽量全面、得体、有信息量地像人类一样，回答人类提出的问题。

顺着人类心思作答

ChatGPT 来自 OpenAI 研究实验室，由 GPT-3.5 系列模型提供支持，包括 3.5 之前的模型版本，都使用 Azure AI 超级计算基础结构上的文本和代码数据进行训练。
要注意的是，当前人们使用的预览版没有连接互联网，它的任何回应都来自离线训练模型。你问它「今天天气如何」，它是不知道的。
GPT-3.5 系列模型最重要的变化，是建立在人类真实反馈基础上的调校。这是一种新使用的 AI 训练方法，标记者会在模型中书写期待的回复，按照期待的回复为标记的答案排序，通过排序来奖励模型。在持续迭代的过程中，输入奖励模型，得到优化参数。

⬆️ ChatGPT的训练步骤
打个比方来说，就像你在参加期末考试，按照整个学期学习的内容来填写考试卷子，答对了，得高分，名次靠前，回家可以得到父母买的最新超级马里奥乐高。如果是语文考试，你知道判卷老师喜欢鲁迅，写作文时不忘来一句「在我的后园，可以看见墙外有两株树，一株是枣树，还有一株也是枣树」之类，还有解锁更多奖励的机会。