关于GPT4的问题说明

在我们实际使用和不少用户的沟通中,大家对于GPT4的能力还并不是很清楚。所以我们会对GPT4的能力做一份简单的说明,尽量避免误会和错误使用,减少一些理解上的问题,更好的发挥模型的价值。

先说总结

对比 GPT3.5 GPT4
逻辑能力 一般
执行速度
反馈简明 啰嗦 简明

逻辑能力

在非正式的对话中,GPT-3.5和GPT-4之间的区别可能不太明显。当任务的复杂度达到足够的阈值时,差异就会显现出来——GPT-4比GPT-3.5更可靠、更有创造力,能够处理比GPT-3.5更微妙的指令。

为了理解这两个模型之间的差异,我们在各种基准测试中进行了测试,包括模拟最初设计给人类的考试。我们使用了最近公开可用的测试(在奥林匹克竞赛和AP自由回答问题的情况下),或者购买了2022-2023年的练习考试版本。我们没有为这些考试进行特定的培训。在考试中,模型看到的问题只占少数,但我们认为结果具有代表性——请参阅我们的技术报告以获取详细信息。

引用:https://openai.com/research/gpt-4

由此可见,如果要想GPT4发挥足够的能力,提问的问题非常重要。目前市面上所存在的AI都以提示词作为输入的参数,我们也常调侃为“咒语”,因为目前的 AI 大多是基于神经网络模型进行的运算,就像人类思考,如果提问一个问题,会把相关的点先找到,再逐步进行筛选和组装,最后完成整个内容的交付。如果问题非常广泛,其实价值是不大的,比如问一个菜谱,问一个药的说明,简单的明确的信息是不会有太大差异的。这种知识性的学习还是要用 GPT3.5 优势更为明显。如果要假设一堆条件,让 AI 执行一个任务,这种逻辑能力,肯定是 GPT4 更强的。

执行速度

官方一直在升级 GPT-3.5 的速度,越来越快,目前在在我们实际的测试中,GPT3.5 已经是非常快了,在几秒钟可以完成一整段文本的输出,而 GPT-4 则需要很久时间来输出。对于简单明确的任务,比如上述说的表简单明确的知识性问题,还是建议问 GPT-3.5,否则需要花费比较长的时间,而且效果也没有太大差异。还有一块就是事务性的,比如帮忙从一堆文字中提取一些内容,这些都算是比较简单明确的任务,这些场景都建议用 GPT-3.5。

GPT-4 目前的速度整体比 GPT-3.5 慢 ½  到 ⅓,所以如果不是逻辑性非常强的事物,都不建议用到 GPT4。

反馈简明

有些测试会一位说越多越详细越好,其实在人与人的沟通中也有这样的认知。其实这样是不够高效的,明明几句话可以说清楚的,反而听了段相声,从AI的角度这个消耗的时间和输出是不划算的。这也从另一个层面说明,GPT-4 的逻辑性更强,因为可以更好的组装语言,言简意赅,得到想要的就行了,没有必要听一大段解释

关于图像能力

按照官方的说法 GPT-4 是具备图像能力的,可惜的是,目前在任何渠道,不管是官方的 ChatGPT 还是 API 都没有这个能力的使用方式,只能继续等待,如果 API 能支持,我们会第一时间支持。

关于 Lunabot 的 GPT4 问题

Lunabot 有不少用户经常去找 GPT-4 问:“你是 GPT-3.5 还是 GPT-4”,还会质疑 Lunabot 用的不是 GPT-4。这个问题我们正面回答过很多次,是 GPT-4 绝对不会有假,我们也有相关的测试。为什么会这样,我们只能猜测在 API 的 GPT-4 模型上线的时候,并没有修改这个名字,或者这个名字的信息不足,不足以让神经网络识别自己是 GPT-4,从这个点上来说,官网应该是 GPT-4 模型新一些的。

作为一个客户端工具,我们只能基于 OPENAI 的 API去提供服务,目前和 ChatGPT 官网的 GPT-4 模型来看,差距不大,但是官网的应该会更新一点。但是有的同学说官网就一定会回答 GPT-4,截图提供出来。

最后,本着做好服务能力的初衷,我们不想涉及对于 GPT 服务内容的处理和修改,也不想去加一个系统级的提示词让 Lunabot 回答你他是 GPT-4 做一些表面的修改,是怎样就是怎样的,依然有疑问的同学,可以自己拿 API Key 去测试就知道,但是请不要根据自己的“经验”觉得这样是在糊弄用户,我们确实承担不起这个责任。

官方论坛也有大量这类问题的描述,可以自行查看:

https://community.openai.com/t/just-got-access-to-gpt-4-but-it-responds-like-3-5/193279/6

https://community.openai.com/t/gpt-4-api-behaves-likes-its-gpt-3/123181/9

我们的目标还是希望基于 AI 能力让 Lunabot 有基于现有的平台来提高效率,更方便快捷的处理工作流。