AI Bot Search

Fair Apps Mobile

2023年02月01日

5.0
Android OS

下载APK

关于AI Bot Search

聊天 GPT 使您能够与生成式预训练 Transformer 聊天

Chat Generative Pre-Trained Transformer，通常称为 ChatGPT，是 OpenAI 于 2022 年 11 月推出的聊天机器人。它建立在 OpenAI 的 GPT-3 大型语言模型家族之上，并使用监督学习和强化学习技术。

ChatGPT 于 2022 年 11 月 30 日作为原型推出，并因其详细的响应和跨多个知识领域的清晰答案而迅速受到关注。其参差不齐的事实准确性被认为是一个重大缺陷。 ChatGPT 发布后，OpenAI 估值为 290 亿美元

训练

ChatGPT 使用监督学习和强化学习在 GPT-3.5 之上进行了微调。这两种方法都使用人类训练员来提高模型的性能。在监督学习的情况下，模型提供了对话，在对话中，培训师扮演了双方的角色：用户和 AI 助手。在强化步骤中，人类训练员首先对模型在先前对话中创建的响应进行排序。这些排名用于创建“奖励模型”，该模型使用近端策略优化 (PPO) 的多次迭代进一步微调。近端策略优化算法为信任域策略优化算法带来了成本效益；它们以更快的性能否定了许多计算量大的操作。这些模型是与 Microsoft 在其 Azure 超级计算基础设施上合作训练的。

此外，OpenAI 继续从 ChatGPT 用户那里收集数据，这些数据可用于进一步训练和微调 ChatGPT。允许用户对他们从 ChatGPT 收到的回复投赞成票或反对票；在投赞成票或反对票时，他们还可以填写一个带有额外反馈的文本字段。