InstructGPT原文:https://arxiv.org/pdf/2203.02155.pdf
chatCPT试用连接:https://chat.openai.com/auth/login
参考链接:
https://zhuanlan.zhihu.com/p/590311003
https://zhuanlan.zhihu.com/p/591423431
https://zhuanlan.zhihu.com/p/395115779
没有合适的资源?快使用搜索试试~ 我知道了~
ChatGPT的原理分析讲解
共2个文件
txt:1个
png:1个
需积分: 5 2 下载量 34 浏览量
2023-04-14
18:24:04
上传
评论
收藏 3.36MB ZIP 举报
温馨提示
GPT的全称是Generative Pre-Trained Transformer,顾名思义,GPT的目的就是通过Transformer为基础模型,使用预训练技术得到通用的文本模型。 对比GPT-1,GPT-2并未在模型结构上大作文章,只是使用了更多参数的模型和更多的训练数据(见表1)。GPT-2最重要的思想是提出了“所有的有监督学习都是无监督语言模型的一个子集”的思想,这个思想也是提示学习(Prompt Learning)的前身。GPT-2在诞生之初也引发了不少的轰动,它生成的新闻足以欺骗大多数人类,达到以假乱真的效果。甚至当时被称为“AI界最危险的武器”,很多门户网站也命令禁止使用GPT-2生成的新闻。 GPT-3被提出时,除了它远超GPT-2的效果外,引起更多讨论的是它1750亿的参数量。GPT-3除了能完成常见的NLP任务外,研究者意外的发现GPT-3在写SQL,JavaScript等语言的代码,进行简单的数学运算上也有不错的表现效果。GPT-3的训练使用了情境学习(In-context Learning),它是元学习(Meta-learning)的一种,元学习的核心思想在于通
资源推荐
资源详情
资源评论
收起资源包目录
ChatGPT的原理分析.zip (2个子文件)
chatGPT原理详解.png 3.51MB
资源说明.txt 255B
共 2 条
- 1
资源评论
技术宅小伙
- 粉丝: 253
- 资源: 1788
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功