财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态南宁市某某贸易制造厂问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经南宁市某某贸易制造厂音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:探索)
-
[孙颖莎4比2战胜张本美和 祝贺,决赛见!]今天,2024WTT澳门冠军赛女单半决赛,@孙颖莎 4比2战胜日本选手张本美和,成功晋级。孙颖莎将与王艺迪争夺女单冠军,国乒提前锁定女单冠亚军,期待姑娘 ...[详细]
-
作为中国新能源转型发展的典型样本,北京时间5月10日晚,极氪智能科技控股有限公司以下简称“极氪”)正式在美国纽交所挂牌上市,股票代码为“ZK”。据悉,因获超额认购,极氪扩大了IPO规模,以每股21美元 ...[详细]
-
恭喜,77岁冯素波获康城最佳演员奖,古天乐等圈内好友送祝福!TVB老艺人冯素波获得法国康城世界影大奖,已经77岁的她晚年拿荣誉大奖值得庆祝一番。5月6日,冯素波低调接受采访,表示短片《垃圾》在国外获得 ...[详细]
-
舞袖翩跹墨韵浓,书道入舞扬国风。5月10-12日,上海歌剧院的原创舞剧《永和九年》亮相国家大剧院,连续三晚与北京观众见面。这也是国家大剧院今年“泱泱国风·舞动经典”系列的开幕演出。《永和九年》剧照《永 ...[详细]
-
近4个月,蔡崇信增持了阿里巴巴股票约145万股。阿里巴巴8月28日正式完成香港双重主要上市。近日,据阿里巴巴披露,截至8月28日,阿里巴巴联合创始人、主席蔡崇信持有公司股票2.7675亿股,占比约为1 ...[详细]
-
“铁三角”张国立、王刚、张铁林时隔15年荧幕重聚,电视剧《老家伙》将于5月14日起,每天19:30在爱奇艺全网独播,北京卫视、江苏卫视上星播出。《老家伙》定档预告(02:43)《老家伙》是由爱奇艺出品 ...[详细]
-
在浩瀚的中国影视长河中,有一位女演员以其独特的古典气质和精湛的演技,成为了无数观众心中的女神。她便是魏慧丽,一个同时让猪八戒、曹丞相、宋公明等历史与神话人物为之倾倒的绝美佳人。魏慧丽出生于一个书香门第 ...[详细]
-
文案|一纸枕书编辑|酒酱紫2024年的国产剧市场可谓是“百花齐放”,不同题材的剧作各出奇招,勾得观众根本移不开眼。年初的时候,王家卫用一部《繁花》让年代剧再放异彩。3月下旬王一博主演的《追风者》又掀起 ...[详细]
-
▲网传某民营医院招篮球特长生岗位要求。图/网络视频截图 又现“萝卜招聘”? 近日,广西桂林兴安县兴安界首骨伤医院招聘篮球特长生,要求有代表学校参加过西南赛区CUBA一级联赛的主力队员或西南赛区CU ...[详细]
-
直播吧5月7日讯 今晚7点35分,浙江男篮将在主场迎战新疆男篮,展开两队系列赛第3场对决。比赛开始前,摄影记者卢鹏儒在社媒上披露了两队今天的大名单,吴前、阿不都沙拉木领衔。以下为具体的名单:浙江队:佩 ...[详细]