GPT-4o和多模态的关系
来自:逆向狮

     OpenAI最近发布了最新旗舰模型GPT-4omni(以下简称GPT-4o),在发布会直播现场中,CTO Murati说:“这是把GPT-4.0级别的模型开放出去了。”确实,GPT-4o在网页版本中用户不仅可以免费使用,更是可以达到听、说、看流畅丝滑交互。GPT-4o支持实时在线语音聊天,支持图文、文档交互,那么这和此前发布的多模态GPTs有何关系呢?这里,我们翻阅了OpenAI的帮助手册来分析下。

    

一、关于ChatGPT用户是否免费使用GPTs

GPTsChatGPT的自定义版本,用户可以通过组合指令、知识和功能来针对特定任务或主题进行定制。比如通过给GPTs发送图片、文档进行提问多模态交互。

ChatGPT是可免费使用的,并且免费套餐的用户现在性能允许的情况下,可以访问GPT store,但这是有频率限制的。

 

二、GPTs是否有使用频率限制?GPT-4oGPTs有何关系

GPT-4o使用GPTs的频率是和GPTChatGPT之间共享频率的。当达到GPT-4o的使用频率达到限制时,将无法使用GPTs,直到速率限制重置。由此可看出,GPT-4o在使用图片和文档进行交互时,其实是调用了GPTs的交互,在这两个功能上和此前的多模态并无本质的区别。

 

三、对于免费用户,GPTs的性能是否有所不同?

    免费套餐中的GPTChatGPT使用GPTs受限是相同的,GPT高级功能(包括数据分析、文件上传、网页浏览和 DALL-E)也会受到更加严格的频率限制,免费用户无法使用DALL-E,并且高级功能将会受到更严格的频率限制,当达到频率限制时,会有如下提示:

此外,使用GPTs的不同模型可能存在一些差异,免费用户的GPTs体验不如付费用户的性能。

 

四、哪些用户可以用DALL-E生成图像?

免费用户不支持使用GPTsDALL-E生成图像,仅提供Plus,团队和企业付费用户使用。

 

小结:通过以上OpenAI帮助手册的四点,我们可以了解到,GPT-4o是可以使用GPTs部分的多模态交互的,并且从功能本质上来说,其实和之前的多模态是没区别的,但是免费用户会受到更多的限制,如频率上的限制,绘图限制等等。