财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态资阳市某某生态科技运营部问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经资阳市某某生态科技运营部音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:综合)
-
新京报讯记者吴婷婷 通讯员燕文颖)10月1日至7日国庆长假期间,首都机场预计运送旅客约131.95万人次。航班及客流高峰将出现在9月30日,返程高峰将出现在10月7日,年旅客吞吐量将在国庆假期突破50 ...[详细]
-
5月7日消息,近日,亚马逊云科技以“无数据 不模型——生成式AI时代的数据基座”为主题举行分享会,亚马逊云科技大中华区产品部总经理陈晓建阐述亚马逊云科技的云上服务创新实践和思考,并对产业趋势发表洞察。 ...[详细]
-
2024国际跳水公开锦标赛暨巴黎奥运会跳水测试赛9日在巴黎奥林匹克水上运动中心进行了女单3米板决赛,中国选手昌雅妮在最后一跳被澳大利亚选手基尼反超,屈居亚军。此前因伤缺席2024世界泳联跳水世界杯总决 ...[详细]
-
当地时间10日,在联大紧急特别会议通过决议授予巴勒斯坦更多权利之后,巴勒斯坦总统阿巴斯发表声明,感谢在会议中投票支持巴勒斯坦的国家,感谢他们“对真相和正义的支持”。△巴勒斯坦总统阿巴斯资料图) ...[详细]
-
当地时间10月13日,联合国秘书长发言人发布关于联合国驻黎巴嫩临时部队的声明。△联合国秘书长古特雷斯资料图) 声明表示,在黎巴嫩南部持续敌对行动的背景下,尽管过去几天联合国阵地遭到袭击并造成多名 ...[详细]
-
21世纪经济报道记者白杨 北京报道刚刚过去的4月份,Faraday FutureFF)创始人贾跃亭在中国社交平台上异常活跃。他先是借抨击小米汽车成功吸引了舆论关注,随后又录制四个视频,回应了网友提到的 ...[详细]
-
智通财经APP获悉,周四,加拿大央行行长蒂夫·麦克莱姆表示,随着通胀下降并维持在较低水平,加拿大央行可能很快会开始降息。麦克莱姆在财政委员会会议中指出,通胀出现再次下行的迹象,预示着降息时机的临近,但 ...[详细]
-
文|唐辰同学名人模仿秀背后实际就是一门流量生意。小长假期间,雷军、周鸿祎、胡锡进等多位名人在短视频平台被山寨,模仿者的行为引起极大的争论。大佬被山寨根据三言科技消息,5月2日开始,一位名叫"雷民"的网 ...[详细]
-
9月29日,国内首条从海南三亚出发至广东湛江的省际跨海直升机航线成功首飞,航程仅60分钟。此次首飞采用国际先进西科斯基S76中型双发直升机,可搭载12名乘客。航线从三亚天涯直升机场起飞,直抵湛江新塘直 ...[详细]
-
近年来,一系列大国重器、一个个超级工程、一项项科技成就,背后都离不开技艺高超、精益求精的大国工匠们默默付出、孜孜以求。社会主义是干出来的。在这个“五一”国际劳动节,“全国五一劳动奖章”“全国工人先锋号 ...[详细]