财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态赣州市某某代理有限公司问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经赣州市某某代理有限公司音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:热门资讯)
-
2024年4月25日为我国第38个“全国儿童预防接种日”,宣传主题为“共同行动 接种疫苗 为全生命周期护航”。温州医科大学附属第二医院、育英儿童医院儿童预防接种咨询门诊副主任医师余刚在接受采访时表示, ...[详细]
-
三言科技消息 今天凌晨,针对很多人质疑的买家没付清迈巴赫拍卖尾款一事,周鸿祎发布视频称,尾款已经付清,将择一个吉日举办车的交接仪式。扣除税费将全部捐献王选基金会。周鸿祎表示,特别感谢关心的人,但是看网 ...[详细]
-
据央视新闻消息,据当地媒体5月9日报道,斐济前总理姆拜尼马拉马因在担任总理期间妨碍司法公正,被判入狱一年。总台记者 魏可枫) ...[详细]
-
AI赛道再发力!苹果(AAPL.US)正为数据中心开发自研AI芯片
智通财经APP获悉,据外媒报道,苹果公司(AAPL.US)一直在开发一种芯片,用于在数据中心运行人工智能工具,但目前尚不清楚这一芯片是否将投入使用。报道援引知情人士报道称,这一努力将建立在苹果此前生产 ...[详细] -
极目新闻通讯员 镇江 夏思雨4月30日,人民银行湖北省分行组织建设的武汉天河国际机场境外来宾支付服务中心正式启用,实现机场“一站式”解决外籍来鄂人员支付服务需求,标志着我省优化支付服务工作迈向新台阶。 ...[详细]
-
近日,网传电竞代打圈大神“胖猫”相关话题引发热议,后续各地网友下单点外卖放在江边以表怀念,然而其中部分外卖出现空包、奶茶变白水等情况,引发网友不满。 5月3日,茶百道就“点外卖变白水”事件发布声 ...[详细]
-
互联网贷款业务风险再被关注。据第一财经记者从业内了解,近期监管部门针对股份行、城商行、民营银行互联网贷款业务下发新的通知,对指标设定、自主管理能力、合作机构约束等提出新的要求。在此之前,监管已针对互联 ...[详细]
-
大级别中极具天赋的刘焕华表现稳定。5月10日,中国举重队公布了参加巴黎奥运会的阵容名单,中国举重队将参加6个级别的争夺,两届奥运冠军石智勇73公斤级)将再次征战奥运,另外两名男运动员为刘焕华102公斤 ...[详细]
-
北京时间5月13日,WTA1000罗马站展开第四轮争夺。以7号种子身份出战的中国金花郑钦文登场亮相,最终,郑钦文以6比2、6比4的比分轻取四届大满贯冠军得主大坂直美,连续第二年闯进罗马站八强,这也是她 ...[详细]
-
俄“硬核军事展览”开幕,现场“人山人海” 超30辆被缴北约装备参展
当地时间5月1日,一场名为“俄罗斯军队奖杯”Trophies of the Russian Army)的露天军事装备展览在莫斯科胜利公园开幕。这场展览将持续一个月,展示俄罗斯在俄乌战场上缴获的超30辆 ...[详细]