跳到正文
Rokoko Insights·精选AI 评分60

Rokoko 发布 Vision 3.0,重建单目 AI 动捕管线并转向云端处理

Introducing Rokoko Vision 3.0: Faster, better, and built for iteration

AI 导读

Rokoko 发布 Rokoko Vision 3.0,对单目 AI 动作捕捉管线做了完整重建,采用云端处理,并让 Video-to-Motion 与 Text-to-Motion 一同进入网页端 Rokoko Create 平台。

推荐理由

Rokoko 重建单目 AI 动捕求解器并转向云端处理,读者可据此比较它与本地处理方案在迭代效率上的差异。

正文 · AI 翻译

今天,我们正式推出 Rokoko Vision 3.0——这是我们单目 AI 动作捕捉流程的彻底重构,也是 Rokoko Vision 发布以来最大的一次飞跃。全新的求解器能捕捉更干净的动作,处理素材的速度超过任何竞争对手,并且把 Video-to-Motion 和 Text-to-Motion 一起直接带进了基于网页的 Rokoko Create 平台。

但最大的进步不只是质量更好,而是节奏更快了。

做动画本该是一个反复迭代的过程:录制、处理、查看、调整、再来一遍。这个循环转得越快,最终的动画就越好。Vision 3.0 正是围绕这个理念打造的。无论你是在捕捉参考动作、为游戏玩法做走位、为影视镜头做原型,还是产出最终动画,Vision 3.0 都能让创作过程持续向前推进。

从表演到成品动画,更快一步

过去几年,AI 动作捕捉发展得非常快。市面上的工具比以往任何时候都多,创作者可以根据自己的工作流选择更合适的方案。

有些方案在本地处理,有些在云端处理,两种方式各有优势。

本地处理让创作者完全掌控计算发生在哪里;云端处理则不需要强大的硬件,素材处理期间创作者还能继续干活。

我们认为,更关键的问题不在于动作在哪里处理,而在于创作者能多快地从表演走到成品动画。

正因如此,Vision 3.0 才以云端处理为核心。你可以从任何浏览器上传素材,在动画生成的同时继续工作,回来时动作已经做好——不必等待漫长的本地处理,不必安装完整的游戏引擎,也不需要高端 GPU。

这让 Vision 3.0 对各类创作者都触手可及,无论你用的是 Blender、Maya、Unity、Unreal Engine,还是别的什么工具。

创作者在对比 Rokoko Vision 与本地处理方案时,比如 Epic Games 在 Unreal Engine 中提供的 MetaHuman Animator,本质上是在两种不同的工作流之间做选择。

目前,MetaHuman Animator 在你的本机上完成处理,而 Rokoko Vision 借助云端基础设施大幅缩短周转时间,让你在动画生成的同时继续工作。本地处理让创作者完全掌控自己的数据,但也意味着处理速度完全取决于手头的硬件——即便在配置相当强悍的机器上,也可能非常耗时。

更多动作,更少等待。

迭代是动画里看不见的成本。

第一条往往不是最好的。出色的动画来自不断尝试想法、调整表演、对比版本、打磨节奏。可如果每处理一分钟都让人觉得昂贵,这件事就很难做;如果每拍一条都要等漫长的本地处理才能继续,同样很难做。

Vision 3.0 的设计目标就是消除这两种摩擦。

我们的云端基础设施处理素材的速度远超前几代 Rokoko Vision,同时给创作者提供的每月处理额度也远超同类云端 AI 动捕方案。

创作者档位:

专业档位:

对于使用云端 AI 动捕的创作者来说,同样的月度投入,Rokoko 能带来多得多的动作产出。

更重要的是,它让你可以放手尝试,不必时刻惦记着积分。Rokoko Create 采用清晰透明的订阅模式,你可以把全部精力放在打磨动画上,无需担心复杂的积分体系、隐藏的 token 费用或意料之外的使用费。

最终形成的工作流是:迭代成为常态,而不是例外。

一个平台,搞定所有动作创作

Vision 3.0 不是独立的工具,也不是埋在某个大型应用里的功能,而是一个完整动作创作平台的一部分。

动作创作正越来越多地涉及多种技术。有时你从一段文字提示开始,有时从一次表演开始,有时则从编辑已有动画开始。这些体验不该分散在不同的产品里。

视频转动作(Video-to-Motion)和文字转动作(Text-to-Motion)如今都集成在 Rokoko Create 中。创作者不必在多个工具之间来回切换,而是可以在同一个工作空间里从视频捕捉动作、用文字生成全新的表演、编辑和整理这些动作,并为投入制作做好准备。未来推出的 AI 动作工具也会在这里落地。

在 Rokoko Create 中,你可以:

  • 用文字生成动作
  • 从视频捕捉动作
  • 在 Rokoko Studio 中编辑和精修动画
  • 整理你的动作库
  • 重定向角色
  • 以所有标准格式即时导出
  • 项目需要时,用 Rokoko 硬件扩展能力

我们不是在解决某个孤立的问题,而是在打造一个平台,覆盖从想法到成品动画的完整旅程。我们的目标是打造最好的数字动作创作平台。

新一代 Rokoko Vision

最初推出 Rokoko Vision 时,我们的目标很简单:让任何有摄像头的人都能用上动作捕捉。这个使命没有变,变的是创作者的期待。

质量更重要。
速度更重要。
工作流更重要。

我们没有继续在原有架构上迭代,而是从零重建了单目求解器。结果是动画更干净、处理更快,整个工作流的体验也顺畅得多。

Vision 3.0 是我们接下来所有工作的基础。

旧版 Rokoko Vision 会怎样?

Vision 3.0 取代了此前单摄像头版本的 Rokoko Vision。对于使用双摄像头工作流的创作者,支持将在发布后继续提供约 30 天,之后停止。今后,Rokoko Create 将成为 Rokoko 生态中 AI 动作创作的大本营。

为什么取消摄像头直接录制

一个明显的变化是取消了直接用摄像头录制。这并非出于技术限制,而是源于创作者本来的工作方式。

超过 90% 的 Vision 用户习惯先单独录制,再上传素材。这样他们可以在处理前检查构图、灯光、机位和表演。与其维护一个大多数用户已不再依赖的功能,我们把这些资源投入到最关键的地方:动作质量、处理速度和整体易用性。

手指追踪呢?

Vision 3.0 发布时不包含手指追踪。这是有意为之。

我们收到的反馈始终表明,创作者最看重的是动作质量、处理速度、工作流的简洁性以及易用性。这些就成了本次发布的优先事项。

一如既往,随着 Vision 的演进,我们会继续密切关注社区的反馈。

动作创作的未来

AI 正在改变动画的制作方式。动作捕捉越来越快,生成能力越来越强,编辑也越来越智能。这些工作流之间的界限正在消失。我们相信,未来属于能把所有这些能力汇聚到一处的平台。

Vision 3.0 是迈向这一未来的重要一步。

更干净的动画,更快的交付,更好的创作工作流,以及一个为下一代动作创作而打造的平台。

我们才刚刚开始。

{{cta}}

来源:Rokoko Insights · rokoko.com