财经观察:提升人机交互效率 多模态大模型易用性进一步推进
人民网北京5月14日电 (焦磊、财经实习生张泊洋)陪人聊天、观察帮助分析工作中的提升态武威市某某自动化科技经销部问题并给出解决方案,甚至和人建立起情感羁绊……在科幻电影《Her》中,人机聊天机器人“Samantha”用充满智慧和幽默的交互进回答展示出高度的智能性和适应性。当下,效率性进这些来自过去的多模科幻想象正加速照入现实中。
北京时间5月14日凌晨,模型美国科技公司OpenAI在春季发布会上发布了最新GPT-4o多模态大模型。易用据OpenAI公司首席技术官米拉·穆拉蒂(Mira Murati)介绍,步推GPT-4o可以接收文本、财经武威市某某自动化科技经销部音频和图像的观察任意组合作为输入,并实时生成文本、提升态音频和图像的人机任意组合进行输出,其中“o”代表“omni全能”。交互进
一直以来,多模态人机交互便是AI领域重点研究发力方向之一。继文生视频大模型Sora之后,GPT-4o的发布迎合了业内对多模态大模型的更多期待。
模态即每一种信息的来源或形式。人们在信息获取、环境感知、知识学习与表达等方面都是采用多模态的输入、输出方式。业内分析认为,相比单模态,多模态大模型同时处理文本、图片、音频以及视频等多类信息,与现实世界融合度高,更符合人类接收、处理和表达信息的方式,与人类交互方式更加灵活,表现得更加智能,能够执行更大范围的任务。
作为面向未来人机交互范式的全新大模型,GPT-4o具有文本、语音、图像三种模态的理解力,并可以综合对话者语气和所处环境空间等因素进行回答,展现出了高度智能性。
发布会上,GPT-4o展示了多项多模态交互能力。在进行实时语音交流时,其响应极快,并且可以识别用户的语音情绪,语音有情感,还能用不同语言和多人同时交互。在语音的同时可以与视频实时交互,演示了一边聊天一边解答手写数学问题,以及实时交流阅读代码,指导编程、视频聊天等能力。
米拉·穆拉蒂表示,“这是我们第一次在易用性方面真正向前迈出了一大步。”
此前,大模型在各个领域的应用主要集中在文生文、文生图之上,今年初Sora的发布则推动文生视频领域进一步发展。业内分析表示,此次GPT-4o的发布,将促使多模态综合交互成为生成式AI的重点发展方向,进而提升人机交互效率,逐渐向AGI方向迈进。
国盛证券研报分析,GPT-4o是迈向更自然的人机交互的重大进步,新功能带来了崭新的多模态交互能力,通过新的端到端模型实现了体验上的新突破,有望在各类终端实现用户体验的最大化。
多模态大模型包含的图文、音频、视频内容数据量巨大,进而引发人们对算力供应的关注。业内分析认为,未来AI的发展对算力的需求将会是几何式增长,算力限制可能是影响生成式AI应用开放使用的重要因素,而算力的可获取性以及成本将是挑战之一。此外,多模态大模型还将带来更严峻的安全挑战。
米拉·穆拉蒂表示,在安全性问题上,GPT-4o通过过滤训练数据和通过训练后细化模型行为等技术,在跨模态设计中内置了安全性。OpenAI还创建了新的安全系统,为语音输出提供防护。
据介绍,用户可有数量限制地免费使用GPT-4o模型来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。
OpenAI CEO山姆·奥特曼在发布会后表示,“我们将创造人工智能,然后其他人将使用它来创造各种令人惊奇的事物,我们所有人都会从中受益。”此外,他还表示OpenAI其他业务收入将帮助公司向数十亿人提供免费的人工智能服务。
(责任编辑:时尚)
-
北京商报讯记者 吴其芸)4月29日,据大兴机场消息,"五一"假期期间5月1日—5日),大兴机场预计保障航班4364架次,运送进出港旅客66.17万人次,日均航班量约872架次,日均旅客量约13.23万 ...[详细]
-
第77届戛纳电影节即将于当地时间5月14日拉开大幕,不少电影人已抵达当地。然而,笼罩在蔚蓝海岸上空的层层阴霾,却并无消退的迹象。就在上周末,包括导演让-皮埃尔·达内、约翰·兰迪斯、路易·加瑞尔等在内的 ...[详细]
-
随着天气转暖,蜱虫及其相关疾病又开始进入活跃期。北京疾控微信公众号提示,外出踏青、赏春的时候,一定要防范蜱虫的叮咬。如何防止蜱虫叮咬?一是做好防护。天气转暖,就到了蜱虫活跃的季节,在户外游玩或野外工作 ...[详细]
-
“没有你我可怎么活啊!”、“太宁栓终于变成我用不起的样子”。近期,知名痔疮药“太宁栓”因涨价10多倍引发广泛关注。不少网友在社交平台发帖称,平价痔疮药如今变成“奢侈品”。据了解,此前太宁栓6枚规格的价 ...[详细]
-
当前,全国即将进入“三夏”大忙时节。作为夏粮主要作物的小麦,产量占夏粮总产量九成以上。眼下,西南地区小麦进入收获期,黄淮海主产区小麦进入灌浆期。主产区各级各部门层层压实责任,为应对极端天气加大指导服务 ...[详细]
-
智己拿出了一款有能力改写中大型纯电轿车行业格局的产品,还给出了被外界质疑“疯了”的惊人限时权益价。5月13日,智己L6上市,官方售价为21.99万元-34.59万元。这一价格比4月公布的23万元预售起 ...[详细]
-
中药入茶,俗称“代茶饮”。代茶饮是将药性安全缓和的中草药经冲泡或煎煮,替代茶来饮用。中药茶饮对常见慢性病和亚健康状态有明显改善作用,能缓解疲劳、帮助消化、调节情绪等。可用于日常保健,亦可辅助治疗疾病。 ...[详细]
-
位于福州的北峰山,从2015年开始,陆陆续续迎来了七八个年轻好友,他们大多从北京、杭州等大城市,搬到山上居住,生活,创作。有用传统大漆材料做艺术作品的90后雷禺和群生,做陶艺雕塑的嘉恺把全家都接来了山 ...[详细]
-
5月14日,历史战争题材电影《援军明日到达》发布“孤城绝境”版定档预告,将于6月28日全国上映。《援军明日到达》定档预告。(01:53)预告展开了80年前中国抗战史上以少敌多的奇迹之战——衡阳保卫战的 ...[详细]
-
经常头痛、持续呕吐要留心!这类肿瘤儿童中排名第二,容易脑积水
作者:北京儿童医院神经外科主治医师彭小娇、名誉主任葛明在0-14岁儿童肿瘤中,中枢神经系统肿瘤发病率较高,仅次于白血病,居儿童肿瘤第二位,占实体肿瘤的2/3,致残、致死率高。儿童脑肿瘤有很多区别于成人 ...[详细]