财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态苏州市某某软件客服中心问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经苏州市某某软件客服中心音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:热门资讯)
-
市国动办提示您:9月21日10时至10时23分,本市五环路以外区域将试鸣防空警报。请广大市民和临时来京人员保持正常的工作生活秩序。更多精彩资讯请在应用市场下载“央广网”客户端。欢迎提供新闻线索,2 ...[详细]
-
库里晚安/甜瓜爆头/詹姆斯霸王步/拉塞尔冰血 谁的庆祝动作最酷?
直播吧9月4日讯 今日,美自媒体Mark Jackson’s Burner发起投票:哪位球星的庆祝动作最酷?1、库里的“晚安安”2、甜瓜的“三分爆头”3、詹姆斯的“霸王步”4、拉塞尔的“冰血”吧友们认 ...[详细] -
北京时间9月4日,美网女单1/4决赛展开争夺。在一场焦点之战当中,郑钦文1-6/2-6不敌2号种子萨巴伦卡,跟对手3次交手均遭遇失利。赛后新闻发布会上,郑钦文谈到了上一场比赛结束太晚对自己的影响。赛后 ...[详细]
-
17部电影定档中秋档!没大片没大咖被吐槽全员炮灰,业内都不看好
本文原创发布,严禁擅自抓取转载!随着电影《野孩子》官宣上映档期,目前已经有17部电影确认定档2024年中秋档了,这个夹在暑假档和国庆档两大热门档期之间的小假期档,突然变得拥挤了起来。根据专业购票软件显 ...[详细] -
新京报讯记者刘欢)2024年中国国际服务贸易交易会期间,世界地理标志品牌分销服务大会举行。会上,北京市知识产权局副局长周立权介绍了保护培育地理标志及产业创新发展的相关情况,提及北京目前有13个地理标志 ...[详细]
-
肯佩斯:劳塔罗有射手的DNA,他和姆巴佩、哈兰德处于同一级别
日前,阿根廷足坛名宿肯佩斯在接受《米兰体育报》记者采访时表示:“劳塔罗-马丁内斯真的拥有那种进球的DNA,我认为他与姆巴佩和哈兰德处于同一级别。”新赛季意甲联赛正式打响以来,劳塔罗-马丁内斯已经出场2 ...[详细] -
郑钦文无缘美网四强登热搜第1!近三年成绩稳步提升 央媒:很棒了
北京时间9月4日,中国选手郑钦文0-2不敌白俄罗斯选手萨巴伦卡无缘美网四强,萨巴伦卡则六次进入硬地半决赛。这场比赛郑钦文是一边倒1-6、2-6惨败,女王文是七号种子,萨巴伦卡是二号种子,而且此前两人的 ...[详细] -
全红婵被男粉丝堵到厕所吓得直哭,工作人员被迫出来喊话疏散人群
男粉丝把全红婵堵到卫生间?工作人员喊话:全红婵吓哭了,放过她吧——引言。【本文主笔:安宁】一个17岁的奥运冠军,被上百粉丝围追堵截,最后吓得直哭,只能跑到厕所里躲起来,等着安保人员过来营救?体育饭圈化 ...[详细] -
19日晚间,松下控股向第一财经确认,将根据具体情况,通过为派驻中国大陆的员工及其随行家属提供临时回国费用由公司承担)、设立心理咨询窗口以及灵活的出勤体制等措施,优先确保他们的安全和健康。 9月1 ...[详细]
-
来源:北京青年报 [台风摩羯已致3死95伤]今年第11号超强台风“摩羯”9月6日16时20分、22时20分先后在海南文昌市、广东徐闻县登陆,造成严重灾害,大量用户电力、通信中断,部分房屋倒损。截 ...[详细]