ChatGPT背后的经济账.docx
版权申诉
98 浏览量
2023-06-03
22:03:26
上传
评论
收藏 683KB DOCX 举报
ChatGPT背后的经济账
ChatGPT能否取代Google、百度这样的传统搜索引擎？为什么中国不能很快做出ChatGPT？当
前，对这些问题的探讨大多囿于大型语言模型(LLM)的技术可行性，忽略或者非常粗糙地估计
了实现这些目标背后的经济成本，从而造成对LLM的开发和应用偏离实际的误判。
本文作者从经济学切入，详细推导了类ChatGPT模型搜索的成本、训练GPT-3以及绘制LLM成本
轨迹的通用框架，为探讨LLM成本结构和其未来发展提供了可贵的参考视角。
原 文 地 址 https: / / sunyan. substack. com/ p/ the- economics- of- large- language- models
动机
LLM的惊人表现引发了人们的广泛猜想，这些猜想主要包括LLM可能引发的新兴商业模式和对
现有模式的影响。
搜索是一个有趣的机会， 2021年，仅谷歌就从搜索相关的广告中获得了超1000亿美元的收入
[1]。ChatGPT (一个使用LLM的聊天机器人，它可以生成高质量的答案，以回答类似于搜索的
查询)的“病毒性”传播已经引发了许多关于搜索领域潜在影响的思考，其中一个就是LLM如今的
经济可行性：
一位声称是谷歌员工的人在HackerNews上表示，要想实施由LLM驱动的搜索，需要先将其
成本降低10倍。
与此同时，微软预计将在3月份推出LLM版本的Bing[3]，而搜索初创公司如You.com已经将
该技术嵌入到了他们的产品之中[4]。
最近，《纽约时报》报道，谷歌将在今年推出带有聊天机器人功能的搜索引擎[5]。
更广泛的问题是： 将LLM纳入当前产品和新产品的经济可行性如何？ 在本文中，我们梳理了当今
LLM的成本结构，并分析其未来可能的发展趋势。
2
重温LLM工作原理
尽管后续章节的技术性更强，但这篇文章对机器学习熟悉程度不做要求，即使不熟悉这方面内容
剩余15页未读，继续阅读
资源评论
