松下发布全新“OmniFlow”多模态生成AI技术,实现文本、图像及音频之间的无缝转换与创作

松下控股公司(Panasonic HD)联合美国松下研发公司(PRDCA)及加州大学洛杉矶分校(UCLA)的研究人员,成功开发出名为 “OmniFlow” 的多模态生成 AI。这项技术的亮点在于其具备 “任意对任意” 的生成能力,可以实现文本、图像和音频之间的自由转换,极大地提升了多模态生成 AI 的应用潜力。

image.png

近年来,多模态生成 AI 的研究越来越受到关注,尤其是结合音频的生成技术。然而,传统方法在数据获取上存在局限,尤其是在同时处理文本、图像和音频数据时,所需的训练数据量和成本大幅增加。针对这一难题,OmniFlow 通过灵活结合针对不同数据格式的生成 AI(如文本与音频、文本与图像),即使在小样本情况下,也能学习到高精度的 “任意对任意” 模型,从而显著降低了数据采集的成本。

image.png

OmniFlow 的技术创新已获得国际认可,并将在2025年计算机视觉与模式识别会议(CVPR)上进行展示。该技术的核心在于,它能够通过连接和处理三种不同数据特征,学习更为复杂的数据关系,而不是简单地对输入数据进行平均处理。这种方法让 OmniFlow 在生成过程中不仅保留了各模态的特点,也提升了表达能力。

image.png

在评估实验中,OmniFlow 在 “文本转图像” 和 “文本转音频” 的生成任务中,表现优于其他传统方法,展现出最佳的性能。实验结果显示,与其他 “任意对任意” 生成方法相比,OmniFlow 所需的训练数据量可减少至1/60,这一显著的优势让其在多模态 AI 领域脱颖而出。

展望未来,OmniFlow 有望在工厂、生活方式等多个领域进行应用,能够生成各种专门针对特定场景的数据。松下控股将继续推动 AI 的社会化应用,致力于开发能为客户生活与工作带来便利的 AI 技术。

猜你喜欢

勇者斗恶龙怪物仙境3风之腰带详细获取技巧与全流程攻略分享
勇者斗恶龙怪物仙境3风之腰带详细获取技巧与全流程攻略分享

勇者斗恶龙怪物仙境3风之腰带获取全攻略

魔禁第二季第19集中,莎夏因上司瓦希莉莎强迫穿拘束衣感到不满,继而瓦希莉莎又为她挑选了一套什么样的新服装?
魔禁第二季第19集中,莎夏因上司瓦希莉莎强迫穿拘束衣感到不满,继而瓦希莉莎又为她挑选了一套什么样的新服装?

小编为大家带来了8月22日魔法禁书目录手游的每日一题,题目:魔禁第二季第19集中,莎夏不满上司瓦希莉莎强迫自己穿的拘束衣

如何在决战平安京中创建空白名字?详细的空白名字输入技巧解析
如何在决战平安京中创建空白名字?详细的空白名字输入技巧解析

在决战平安京中,大多数玩家都喜欢拥有一个独特吸引别人眼球的好名字,前不久小编我就看到一个特别独特的名字,它的名字是一片空

第五人格黑白无常角色上线时间及其玩法特点分析
第五人格黑白无常角色上线时间及其玩法特点分析

第五人格手游近期公布了新监管者黑白无常的信息。第五人格黑白无常怎么样?黑白无常什么时候出?91安卓网小编分享下第五人格黑

微信中国象棋残局213关通关技巧分享 伊阙之战详细攻略与策略解析
微信中国象棋残局213关通关技巧分享 伊阙之战详细攻略与策略解析

微信中国象棋残局213关怎么过?微信小程序腾讯中国象棋残局闯关战国七雄213关,本关黑方五卒过境,独帅难支,所以必须将双

如何提升FIFA足球世界中的球员能力值?实用技巧和最佳提升方案推荐
如何提升FIFA足球世界中的球员能力值?实用技巧和最佳提升方案推荐

在《FIFA足球世界》手游中,球员是可以进行培养的,但是培养球员需要很多道具,很多玩家都不知道球员升级需要什么,球员提升

波斯王子:失落王冠锐目能力解锁与刑满释放奖杯获取攻略详解
波斯王子:失落王冠锐目能力解锁与刑满释放奖杯获取攻略详解

波斯王子:失落王冠锐目能力解锁刑满释放奖杯方法

不思议迷宫中机器蜘蛛获取攻略 四种获取机器蜘蛛的方法详解
不思议迷宫中机器蜘蛛获取攻略 四种获取机器蜘蛛的方法详解

不思议迷宫四个机器蜘蛛获得方法有什么呢?很多小伙伴对这个游戏中的四个机器蜘蛛不是很清楚,不知道它是干嘛的,那么四个机器蜘