2022 年 11 月 30 日，OpenAI 发布了 ChatGPT 人机对话交互模型，
相比过去的人机对话模型，ChatGPT 展现出更贴近人类的思维逻
辑，可以回复用户的连续问题，具有一定的道德准则，减少了错
误问答的出现概率，具备代码的编写和 debug 功能。ChatGPT 在
人机对话上到达了前所未有的高度，模型开放测试一周用户便突
破了百万级别。ChatGPT 作为 GPT3.5 的微调版本，采用了基于
人类反馈的强化学习（RLHF）和近端优化策略（PPO），通过奖
励模型的设定，极大减少了无效的、编造的、有害的答案出现概
率，更多输出了人们期望的答案。当前 ChatGPT 已经在诸多问答
环节里表现出极高的拟人化，足以以假乱真。目前 ChatGPT 处于
免费的开源公测阶段，仍在优化迭代过程中。前代版本 GPT-3 已
经商业化落地，基于 GPT-3 产生的 APP 达 300 多个，覆盖传媒、
营销等领域，OpenAI 以 API 的形式向开发者提供有偿的 GPT-3
模型使用权限，按照 token（1000 tokens=750 words）使用量收费，
1000
