《用姥姥都能听懂的方式，揭秘chatgpt背后秘密...》

我读了一本叫《这就是ChatGPT》的书，OpenAI CEO、ChatGPT之父Sam Altman说：

“这是我见过的对ChatGPT原理的最佳解释。”

大家不要被第一张图吓到了，虽然这本书内容很多，也涉及很多专业词汇，不过没有关系，我会用最简单的大白话让大家明白，神奇的ChatGPT到底是个啥？（我只会讲大家感兴趣的常识，不会讲复杂的技术细节。）

如果大家耐心看完，一定可以解决你很多困惑。

为什么它能说出人类文字？

它的主要工作就是尝试接你的话，俗称接话。比如你对它说 窗前明月光，它会接 疑是地上霜。

那它怎么知道接什么呢？因为它已经“读”了很多很多的网页和书，所以它知道人们通常会怎么说。

再比如，你给它一个开头：“人工智能最厉害的地方是...”，它会想：“嗯，我记得在我读过的那么多内容里，人们通常会怎么接下去说？”然后它就会给你一个答案。但是它不是真的去查每一句话，而是有一种计算机自己的方法找到和你的句子相似的内容。实际上它在查找完之后，先是返回了很多个答案，然后选了一个去接你的话。

再再比如，我给它输入：三土学__  他可以接 三土学AI 三土学做饭 三土学开车 三土学相声，最终它选了一个它认为最合理的答案给你。

这里你可能会问，那什么是合理呢，这个后面我会说到。

理解到这里，你已经超越80%的人了，同时我们可以知道“它就是去网络上搜索答案，然后返回给你”这种说法是严重错误的。正确的理解总结起来两点：

1 它是个超级学霸，保存了大量人类的知识

2 它合理的猜测下一句应该说什么

什么叫合理的猜测，什么叫合理？

先举个例子：我说12345，作为人类你猜下一句是什么，是678910 还是 上山打老虎。听起来哪个答案都是对的，这里我们就要说说哪个更合理。

作为chatgpt，它会把保存的所有人类回答信息进行一个统计，如果100个人回答上山打老虎，10个人回答678910，那么对于chatgpt来说上山打老虎就是合理，专业点讲叫大概率是对的，即合理。

到这你可能会理解一件事，有时候chatgpt给的答案，不是你想要的时候，你对它说：你再想一想有没有其他可能。然后它就给出另一个我们想要的答案，这时候你说太吓人了，它竟然会思考了，其实不是，它只是重新给了一个其他的答案而已。

它怎么记住3000亿条人类知识的？

这正是接下来要讲的，ChatGPT的核心正是一个被称为“大型语言模型”的技术。我们可以理解为机器的大脑。

机器的大脑就是模仿人脑的构造而来的，人类的大脑就像一个巨大的城市，里面住着1000亿个小居民，这些居民叫做神经元。这些神经元就像是忙碌的小人，他们每秒可以发出一千次的闪电般的信号。他们之间有很多的道路连接，就像树的枝条一样。这些道路让他们可以互相传递消息。但是，每条道路的宽度不同，有的宽，有的窄，所以消息传递的速度也不同。一个神经元是否要发出信号，主要看它从其他神经元那里收到了多少消息，而且不同的道路对这个决定有不同的影响。

所以“模型”就是基于人脑的构造，研究了一种“神经网络”算法，然后工程师在计算机中构建了一个巨大的城市，这座城市的居民信息、道路宽窄，都是根据3000亿条的人类知识数据一点点建造出来的，通过不断调整居民的位置，居民的信息，道路的位置、宽窄等等，最终形成了机器的大脑。而机器大脑的这座城市有多少居民呢？chatgpt4拥有惊人的1.5万亿个参数！

阅读的这里，你应该可以理解为什么chatgpt上知天文下知地理了吧。

超越人类的训练！

如果只有人类输入的“课本”知识，那不就成了死记硬背的书呆子，因此下面讲的这部分也非常重要。

首先，我们已经知道工程师给ChatGPT看了很多很多的书和网页，让它学习。但这还不够，因为有时候它写出来的东西，虽然看起来没错，但其实有点怪怪的，不太像人说的话。所以，工程师还需要和它多聊天，告诉它哪里做得好，哪里做得不好。这和我们人类学习也很像，我们要自己去做作业，练习和实践，然后等老师审批检查。

整个学习训练的过程是很长的，有时候，我们只需要告诉ChatGPT一次，它就能记住，这和我们学习新知识很像，有时候只需要听一次，就能记住很久。

但有时候，你告诉它一些很奇怪的事情，它可能就不知道怎么回答了。这和我们人类也很像，有时候如果听到一些很新奇的事情，我们也会感到困惑。

不过还好机器不用休息，同时机器的计算速度又很快，简直就是一个又聪明，从勤奋的学生，这也是为什么它进步如此之快。

总之，ChatGPT就像一个学生，不断地学习和进步，但也有自己的优点和缺点。

所以现在你应该可以理解：我们把它当做一名大学生来用就可以了，还是一个超级聪明的大学生哦！

chatgpt是否有记忆？

最后再给他家科普一个知识，关于记忆的问题，看下面这个例子：

可以发现他可以记住之前聊过的话，因此它是有记忆的，不过这个记忆很短暂，只能基于这一次聊天，而且还有总体字数的限制。

cahtgpt3.5版本中最大上下文限制是 4096 个 token。这包括所理解和生成的所有文本，包括用户的问题和之前的回应以及对话中的任何其他信息。

token听不懂没关系，你可以这样简单理解，一个token就是一个汉字（当然这个说法是不准确的，只是为了好理解），一个人和你说了10个字，你能记住没问题，说50个字可能前几个字就忘记了，而且回顾上面讲的，chatgpt是“接话”，所以当你不断地在一个聊天窗口和它对话，当说的话超过了它的最大记忆数量，它就会遗忘最初你说的话。当你关闭了聊天窗口，它就会忘记所有和你的对话。所以你不用担心chatgpt会被用户教坏，因为它根本不会把用户说的话永久保存下来，只是临时记忆。

智能涌现！

"智能涌现" 指的是当机器学习系统变得足够复杂和智能时，它们能够产生出意料之外的行为、创造性的解决方案或者新的知识，而这些都不是明确编程或人类干预的结果。

上面我讲的一大堆，是工程师计划中的结果，但有一天机器自己产生了想法，超出人们对它的控制，就可以说机器有了自主意识。

智能涌现这一重要概念，也正是人工智能研究人员最大的担忧所在。

目前没有明确的证据表明chatgpt已经出现了智能涌现，但是随着不断地发展，一切皆有可能，你说呢？

关注公众号，点击福利领取价值699的学习资料。