6月22日,在华为开发者大会2024上,天图万境宣布与华为云签署了合作协议,共同推出全新的“视频声效大模型”解决方案。这次合作标志着两家公司将在AI视听领域发挥各自优势、强强联合,基于天图万境“AI感知视听”技术和华为云的昇腾云AI云服务底座,将AI的“智慧感知”能力服务千行万业,在AI时代为行业用户提供新质生产力。
图:天图万境、华为云合作签约现场当我们希望智慧的AI机器人帮我们提供家政服务时,它首先需要能能够按照人类的理解分辨物体,比如哪些是碗碟,哪些是衣服,哪些是食物,然后才能根据需要的服务按照对应流程操作,这就是智慧家居。要让AI具备这种能力,首先它需要会“看”,其次还要有理解和分辨物体的能力。同理,一旦AI具有了与人类相似的空间、视听感知能力,将对工业制造、矿山挖掘、电影视听、文化旅游、医疗教育等产业引发深刻变革。
例如,在矿山挖掘领域,可以利用AI的视听感知,对矿山环境进行全面监控,提高开采效率,保障安全生产;在消防救火领域,AI机器人可以在火灾现场快速分析烟雾和火焰的动态,协助消防员制定更有效的灭火策略;在智慧医疗领域,通过对病患的血管、组织进行识别,辅助医生完成精密的手术,提供高质量的医疗服务。
通过十年潜心研发,天图万境的AI感知视听技术,现在已经让AI具有了与人类相似的视力、听力、理解力、记忆力等感知能力。例如该技术中的“AI图像分割”引擎,通过深度学习和模式识别的AI训练,模仿人类大脑的认知过程,通过观察图像并根据特定场景的规则做出决策,识别物体。
AI图像分割技术最早应用在了电影视听领域,取代了传统的绿幕抠像,能够在消费级显卡上独立离线实时运行,代表了当前世界最前沿的专业级图像处理能力。这项技术的发展标志着中国在电影视听领域,特别是在图像分割技术方面,取得了显著的进展,打破了国际市场长达11年的技术垄断,为中国在该领域的自主创新和应用开辟了新的道路。
目前,天图万境已经建立了全球最大的感知数据集,AI感知视听技术包含了以AI为支撑的多种能力,包括:图像感知框架、视频分割框架、空间计算框架2.0、空间还原框架、人体追踪框架、图像联想框架、神经NERF重建、感知渲染管线、实时注意力框架、材质识别框架alpha、材质识别框架1.0、光场还原框架、空间视频管线、AI音色大模型、AI感知声场等。其中的多个单项能力,与德国马普所、midjourney、Stable Diffusion、LUMA AI、Wonder Studio等AI创新公司的产品和技术处于同一梯队。
天图万境此次与华为云的合作签约,不仅体现了“AI感知视听技术”获得了来自全球领先的技术公司华为的认可,更代表了双方对AI感知视听应用前景的一致看好。华为云将发挥云计算、大数据、繁荣生态等方面的领先优势,双方将携手合作,以“视频声效大模型”解决方案,重塑千行万业的业务新流程。
（来源：News快报）
