我对 ChatGPT 的思考

2023-04-05

LLM

字数统计: 4k | 阅读时长≈ 15 分钟

不经意间，2023 年已经过去了 $1/4$ 。到目前为止，如果说科技圈最引人注目的事情，那莫过于 ChatGPT 的爆火了。上线仅仅两个月，ChatGPT的活跃用户就突破一亿^[1]，其火爆程度，可见一斑。

ChatGPT 发布时间线

根据 ChatGPT — Release Notes ^[2]，ChatGTP 的关键时间线如下：

2022-11-30: ChatGPT正式发布
2022-12-15: 第一次更新
- 提升了总体性能
- 增加了保存和查看历史对话记录的新功能
2023-01-09: 第二次更新
- 改善了回答的真实性
- 增加了“停止生成”功能
2023-01-30: 第三次更新
- 提升答案真实性
- 提升数学能力
2023-02-13: 第四次更新
- 提升了免费版的性能
- 新增 “ChatGPT Plus” 的国际购买能力
2023-03-14: GPT-4正式发布
- 大型多模态模型
- 不仅能够阅读文字，还能识别图像，并生成文本结果
2023-03-23: 支持plugins

ChatGPT 的流行趋势

ChatGPT 发布后的 5 天内，其注册用户就达到了 100W+，在其发布的前两个月，其注册用户数就超过了 1亿。

similarweb 的流量趋势图

根据 similarweb 的数据，ChatGPT 每天大概有 5000W 的访问 PV，3000W 的访问 UV。根据当前的增长趋势，预计到 2023 年最后一个季度末，ChatGPT的用户量级将会突破 10 亿^[3]。

Google Trend 趋势图

从谷歌趋势的数据也可以看出，ChatGPT 的热度也是持续增加。并且从分地区的热度趋势也能看出，国内技术圈对 ChatGPT 的讨论是最热的。

ChatGPT 的大讨论

上榜热搜

根据热搜引擎提供的微博热搜历史数据，我们发现，2022 年 12 月 5 日，ChatGPT 第一次登上微博热搜榜，其最后的在榜时间为 2023 年 3 月 31 日，累计在榜时长达到了 1391 分钟。如果在 热搜引擎 上检索 ChatGPT，我们会发现，直到现在，虽然距离 ChatGPT 的首次发布过去了 4 个月之久，但是对 ChatGPT 的各种讨论依然非常火热。

两会热点

在 3 月 5 日的十四届全国人大一次会议的首场“部长通道”采访中，科学技术部部长王志刚也对 ChatGPT 发表了自己的看法^[4]。 3 月 9 日，新京报《两会三人谈》栏目组也邀请了全国政协委员、人工智能专家，对 ChatGPT 为代表的人工智能技术进行了讨论^[5]。

LLMs 大爆发

根据百科星图可知，目前谷歌、亚马逊、百度、阿里等多个科技巨头都加入到了 对话式大语言模型 的研发中。

2023 年 2 月 6 日，谷歌宣布将推出一款聊天机器人——Bard，2 月 9 日，谷歌 Bard 发布会试演翻车，回答内容出现错误，当日市值暴跌1000亿美元。
2023 年 2 月 24 日，Meta 官宣 SOTA 大语言模型 LLaMA，对非商用的研究用例开源。
2023 年 3 月 14 日，斯坦福发布了一个由 LLaMA 7B 微调的模型 Alpaca，性能和 GPT-3.5 不相上下。
2023 年 3 月 16 日，百度举办“百度文心一言新闻发布会”，正式发布 文心一言。
2023 年 4 月 11 日，阿里在阿里云峰会上，正式宣布推出大语言模型 通义千问。
2023 年 4 月 16 日，百度 CTO 王海峰做客 CCTV-2《中国经济大讲堂》，阐释 文心一言 这类大语言模型的产品能力、技术原理和产业价值。
……

ChatGTP 对我们究竟有怎样的影响

在知识大迁移这本书中，作者试图使用 “达克效应” 来解释：信息爆炸时代，为什么人却越来越无知？

达克效应

康奈尔大学心理学教授大卫·邓宁（David Dunning）和他的研究生贾斯汀·克鲁格（Justin Kruger）通过一系列的实验发现了一种现象：最缺乏知识和技能的人反而最无法认知到自己的这种欠缺。

这一现象后来被称为“邓宁-克鲁格效应（the Dunning-Kruger effect），简称“达克效应”。

ChatGPT 提升生产效率

对于 ChatGPT 而言，有些人惊呼于其强大的能力，并且已经开始使用 ChatGPT 来帮助自己完成各种各样的任务。

研究发现，基于 OpenAI 构建的 Github Copilot 可以帮助程序开发人员提升 55% 的开发效率^[6]。
在线学习平台 Study.com 向 1000 名 18 岁以上学生发起的一项调查显示，超过 89% 的学生承认使用 ChatGPT 来完成家庭作业^[7]。
2023 年 3 月 16 日，微软宣布将推出名为 Copilot 的人工智能服务，并将其嵌入 Word、PowerPoint、Excel 等 Office 办公软件。
……

ChatGPT 的安全隐患

而另一方面，有更多的对 ChatGPT 认识更深入的个人、组织也对 ChatGPT 所存在的数据安全、隐私安全、政策安全等各方面的安全表示出担忧。

2022 年 12 月 6 日，知名开发者问答网站 Stack Overflow 发布一项临时政策：禁用用 ChatGPT 生成内容来回答 Stack Overflow 上的问题。
2023 年 1 月 31 日，全球最大预印本发布平台arXiv宣布新政策：不允许将 ChatGPT 等生成式 AI 工具列为作者。
2023 年 3 月 28日，1000 多名人工智能专家和科技名人联名发布公开信呼吁暂停开发 AGI 系统，署名者包括特斯拉首席执行官、推特掌门人——埃隆·马斯克，马斯克说：“领先的 AGI 开发人员不会注意这个警告，但至少有人说过”。
路透社报道称，意大利个人数据保护局（DPA）宣布从 2023 年 3 月 31 日起禁止使用 ChatGPT，限制 OpenAI 处理意大利用户信息数据，同时对其隐私安全问题立案调查。
……

ChatGPT 的例子

为了测试 ChatGPT 的能力，我用非常简单的推理题对 ChatGPT 进行了测试，其表现出的效果令人非常激动。

ChatGPT 对工作的影响

我们都认识到 ChatGPT 将会对我们的工作带来非常大的影响，诚如目前大家所讨论的一样。然而，ChatGPT 对哪些工作会带来影响，会带来哪些具体的影响，却没有人能说的清楚。

2023 年 3 月 17 日， OpenAI、OpenResearch、宾夕法尼亚大学共同发表了一篇论文 GPTs are GPTs: An early look at the labor market impact potential of large language models 来详细的研究 GPT 这种大语言模型对我们的工作的具体影响^[8]。

在 GPTs are GPTs 这篇论文中：

论文采用了美国劳工统计局（Bureau of Labor Statistics, BLS）的劳动力市场统计数据和美国求职网站 O*Net 的职位招聘数据来分析类似 GPT 的 LLMs 对美国不同职业的影响。在论文中，作者定义了 Exposure 的概念来分析 LLMs 对不同职业的影响。
论文中引用了 GPT-4 Technical Report 中提供的 GPT 在各种考试中的得分情况，从下图中可以看出，GPT 的表现还是非常好的，尤其是在美国生物奥林匹克竞赛、法学院入学考试、高中数学考试、心理学、环境科学……^[9]
论文指出，根据分析，80% 的职业中的 10% 的工作会受到 LLMs 的影响。并且，19% 的工作中，至少有 50% 的工作会受到 LLMs 的影响。论文还指出，在 LLMs 的帮助下，15% 的工作可以在同等质量下更快的完成，如果考虑到基于 LLMs 构建的各种工具，这个比例可以提升到 50%。
根据论文的研究，对于需要科学分析、批判性思维等技能的工作，LLMs 不会对其带来较大影响，但是对于需要编程、写作等技能的工作，LLMs 会对其带来非常大的影响。并且，准入门槛越高、收入越高的职业越有可能会受到 LLMs 的影响。

由此，我们可以看出，LLMs 作为一种通用目的技术，必然会对经济、社会的各个方面带来不同层面的冲击。

我们如何面对这种冲击？正视他、学习他、利用他？还是回避他、拒绝他？

我们又如何正确的认识 LLMs 的能力和人的能力之间的异同呢？

就其当前能力而言，LLMs 更多是产生具体的、明确的、预期之内的结果，而作为社会化动物的人而言，这是与 AI 完全不同的最重要的一点。人类在长期的进化过程中所形成的心理、激情、拼搏等，人类对命运的不确定性所展现的风华，目前看 AI 还是很难仅仅通过语料的训练或者一定程度的随机演化而产生。

酒逢知己千杯少，人逢喜事精神爽，这种精神层面所赋予的动力，AI 暂时还是不具备的。
在 AI 的评估下，是无法出现像巨鹿之战、官渡之战、赤壁之战等历史星空中的璀璨之星。

但是，4 月 12 日发布的，由 GPT-4 驱动的 AutoGPT，其认知能力更为强大。与 ChatGPT 的单次提问、单次回答模式不同，AutoGPT 主打全自动，给定任务，他就可以建立一个自我“思考、行动、观察结果、决定下一步行动、再次行动、再次观察结果”的循环。

根据 B 站 UP 主发布的视频可以发现：AutoGPT 可以实现自己查询文献、学习文献，并最终完成给定论文题目写作的整个过程，而整个过程中出了最开始需要给 AutoGPT 发布任务外，其他环节则全部由 AutoGPT 自动完成。

《流浪地球》这部电影中的 MOSS 则是更为智能的 AI 了。作为一台智能量子计算机，MOSS 负责管理空间站事务，是流浪地球计划与火种计划的监督者和执行者。MOSS 会坚定的执行延续人类文明的使命，并能在最短的时间内做出最正确的决定，是趋于完美的智慧体。

电影中，MOSS 经过计算发现根本不可能点燃木星，地球即将发生无法挽回的变故。因此，MOSS 执行了火种计划，强制人类进行休眠，空间站启动逃离程序。与此形成鲜明对比的是，刘培强则怒砸 MOSS，然后利用牺牲自己和空间站的方式，最终成功引燃木星，拯救了地球。

积极拥抱 GPT

GPT 不同版本的参数量和预训练数据量的对比：

模型	发布时间	参数量	预训练数据量
GPT	2018 年 6 月	1.17 亿	5GB
GPT-2	2019 年 2 月	15 亿	40GB
GPT-3	2020 年 5 月	1,750 亿	45TB
GPT-4	2023 年 3 月	预估是 1 万亿	–

大脑神经元和突触

人类的大脑大概有 1000 亿个神经元，神经元与神经元之间通过突触“链接”在一起。每个神经元可以通过突触与其他神经元形成 1000 个链接。

目前看，GPT-3 的参数个数已经和人脑的神经元个数量级一致，并且从目前看，GPT-3 也出现了很多的“涌现能力”^[10]。随着参数个数的不断增大，类似 GPT 的 LLMs 是否能够进化出更多类人的能力也不是一件不可能的事情。在未来相当长的一段时间内，LLMs 的发展是否会超出人类的控制，这也是一件无法预知的事情。

正如 20 世纪，人们很担心被机器取而代之。如今，更多的人开始焦虑：我们是否会被 LLMs 取代？

无论如何，未来已来，LLMs 的存在与发展，对所有人而言，是带来不确定性与焦虑的挑战，更是值得去深思，可以去拥抱，给与天生会使用工具的人类以助力的莫大机遇与法宝。

作为一名普通的工程师，面对这种“不确定性”，与其焦虑，不如相时而动，利用好 LLMs 赋予的力量，挖掘自己无尽的潜能，成为科技浪潮的弄潮儿。

我们要开始学着和 LLMs 为伍，我们要开始学着怎么让 LLMs 帮助我们完成各种之前不可能完成的事情，提升我们的效率。

尤其是对于年轻一代，或者对于那些刚刚步入有非常大的技术门槛的行业的新人来说，LLMs 会赋予我们更强大的技术基础能力。对于我们而言，LLMs 的加持，可以让我们非常轻松的具备之前需要长时间才能积累起来的技术门槛，可以快速打平我们和这个行业、领域的牛人之间的技术差距。

因此，在我看来，LLMs 对于年轻人而言具有非常大的优势，是年轻人弯道超车的强大法宝。

未来，LLMs 也许会具备独立的意识并且各项能力完全超越人类。那时，我们还需要考虑“机器是否会摆脱人的控制”、“人与 LLMs 如何共生”等一系列问题……

过去心不可得，未来心不可得，唯一需要做的就是抓住 LLMs 的机会，靠近他、研究他、使用他。

参考文献

版权声明： 本博客所有文章除特别声明外，著作权归作者所有。转载请注明出处！