详细介绍
工具简介
Kinetix 是一家专注于前沿 3D 技术与人体运动智能的科技公司,其核心使命是将 3D 技术与机器学习深度结合,实现对类人动作的理解与生成。该工具并非一个简单的在线应用,而是一套面向开发者和创作者的底层技术解决方案,旨在为角色动画和 AI 视频生成提供强大的生成模型与核心组件。Kinetix 的研究重点涵盖人体姿态估计、计算机视觉以及 3D 角色工作流的基础构件,其技术已获得行业广泛认可,被集成到 Unity Muse、Adobe Mixamo 以及 KRAFTON 的 OVERDARE 等知名平台中,服务于全球的游戏开发者和内容创作者。
Kinetix 的技术栈主要围绕两大方向构建:一是 3D 动画生成,二是 AI 视频生成。在 3D 动画领域,Kinetix 开发了先进的视频转动画模型,能够从普通的 RGB 视频中捕捉人体动作,并将其转化为高质量的 3D 角色动画。这项技术极大地降低了 3D 动画制作的门槛,使开发者无需专业的动捕设备或复杂的动画制作软件,即可快速为游戏角色生成逼真的动作。该技术已作为原生功能集成到 Unity 的 Muse AI 服务中,让游戏开发者可以直接在引擎内生成 3D 动画。同时,Kinetix 还与 Adobe 合作,将其 3D 动画模型和技术授权并整合到 Mixamo 平台,帮助创作者利用 AI 为角色制作动画。此外,Kinetix 为 KRAFTON 旗下游戏 OVERDARE 提供了名为“Emote Creator”的游戏内功能,玩家可以创建自定义动画,并配备了完善的内容审核系统。
在 AI 视频生成方面,Kinetix 推出了名为 Kamo-1 的 3D 条件视频生成模型。该模型旨在为 AI 视频生成引入物理基础和精确控制能力。传统的视频生成模型往往难以精确控制镜头运动和角色动作,而 Kamo-1 通过支持多模态条件输入,解决了这一痛点。它能够同时接受 3D 相机轨迹、从 RGB 表演视频中重建的 3D 角色动画、参考图像以及自然语言提示等多种条件。通过对相机轨迹和 3D 动画进行联合条件化,Kamo-1 实现了在同一个生成镜头内对相机运动和角色运动的协调控制。这意味着创作者可以精确指定镜头如何移动,同时让角色按照预设的 3D 动画进行表演,从而生成具有专业级运镜和角色表演的 AI 视频。
主要功能
视频转3D动画
Kinetix 的核心功能之一是将普通的 RGB 视频转换为高质量的 3D 角色动画。用户只需提供一段包含人体动作的视频,系统便能通过其先进的人体姿态估计和计算机视觉算法,自动提取动作数据并重定向到 3D 角色骨架上。这项技术无需昂贵的动捕设备,极大地简化了 3D 动画的制作流程。该功能已成功集成到 Unity Muse 和 Adobe Mixamo 等平台,开发者可以在熟悉的工作流中直接调用,快速为游戏角色生成行走、奔跑、跳跃、舞蹈等各类动画,显著提升开发效率。
Kamo-1 3D条件视频生成
Kamo-1 是 Kinetix 推出的创新性视频生成模型,它通过引入 3D 条件控制,为 AI 视频生成带来了前所未有的精确度。该模型支持多模态输入,包括 3D 相机轨迹、3D 角色动画、参考图像和自然语言提示。创作者可以精确设定虚拟相机的运动路径(如推拉摇移),同时指定角色的 3D 动画序列,模型会将两者协调一致地生成最终视频。这使得生成的视频不仅画面逼真,而且运镜和角色表演都完全符合创作者的意图,适用于制作高质量的动画短片、游戏过场动画和虚拟制片内容。
人体姿态估计与运动理解
Kinetix 在人体姿态估计领域拥有深厚的技术积累。其算法能够从单目或多目视频中精确估计人体的三维姿态和运动轨迹,理解复杂的肢体动作和空间关系。这项基础技术是视频转动画和 Kamo-1 视频生成的核心支撑。通过精准的姿态估计,系统能够捕捉到细微的动作细节,确保生成的动画或视频中的角色动作自然流畅、符合物理规律。该技术可应用于体育分析、人机交互、虚拟现实等多个领域。
游戏内动画创作工具
Kinetix 将其视频转动画技术封装为易于集成的游戏内工具,例如为 OVERDARE 平台打造的“Emote Creator”。玩家无需离开游戏,即可通过录制短视频或使用预设模板来创建个性化的角色表情动画(Emote)。Kinetix 还提供了配套的内容审核系统,确保用户生成内容的安全合规。这种模式极大地丰富了游戏的 UGC 生态,增强了玩家的参与感和创造力,为游戏运营商提供了新的互动玩法。
3D角色工作流基础组件
除了端到端的生成模型,Kinetix 还致力于研究和开发 3D 角色工作流中的基础组件。这包括骨骼绑定、动作重定向、动画融合与过渡等技术。这些组件能够帮助开发者更高效地处理 3D 角色资产,将不同来源的动画数据适配到不同的角色模型上,并实现流畅的动画状态切换。通过提供这些底层技术,Kinetix 赋能开发者构建更复杂、更逼真的 3D 角色交互体验。
使用方法
Kinetix 主要作为技术解决方案提供给开发者和平台方,普通用户通常通过集成了 Kinetix 技术的第三方应用来使用其功能。以下是典型的使用流程:
- 通过集成平台使用:对于游戏开发者,可以在 Unity 编辑器中通过 Muse AI 服务直接调用 Kinetix 的视频转动画功能。在 Adobe Mixamo 网站上,用户可以上传视频或使用摄像头捕捉动作,利用 Kinetix 的 AI 模型为角色自动生成动画。
- 在游戏内使用:在 OVERDARE 等游戏中,玩家可以找到“Emote Creator”功能,按照界面提示录制一段自己的动作视频,系统会自动将其转换为游戏角色的动画表情,并可在游戏内使用和分享。
- 直接体验 Kamo-1:研究人员和开发者可以访问 Kinetix 为 Kamo-1 搭建的专属网站(video.kinetix.tech),了解模型的技术细节,并可能通过申请试用或 API 调用的方式,体验 3D 条件视频生成的能力。
- 联系合作:对于有定制化需求的企业客户,可以通过官网的联系方式与 Kinetix 团队沟通,探讨技术授权、联合开发等合作模式。
产品优势
| 优势维度 | Kinetix 的特点 | 带来的价值 |
|---|---|---|
| 技术领先性 | 专注于 3D 与机器学习结合,拥有先进的人体姿态估计和生成模型 | 生成的动画和视频质量高,动作自然,物理感强 |
| 易用性 | 技术被封装成易于集成的组件,无缝嵌入 Unity、Adobe 等主流工作流 | 开发者无需从头研发,大幅降低 AI 动画的使用门槛 |
| 控制精度 | Kamo-1 模型支持 3D 相机轨迹和角色动画的联合条件控制 | 实现专业级的运镜和角色表演,生成结果可控性强 |
| 行业验证 | 技术已获 Unity、Adobe、KRAFTON 等头部公司采用 | 证明了其技术的可靠性和商业价值,值得信赖 |
应用场景
- 游戏开发:快速为游戏角色生成海量动画,用于 NPC 行为、玩家表情、过场动画等,缩短开发周期,降低制作成本。
- 虚拟制片与动画制作:利用 Kamo-1 精确控制虚拟相机和角色,生成高质量的预演视频或最终镜头,提升制作效率。
- UGC 平台与社交应用:集成“Emote Creator”类功能,让用户轻松创建个性化的 3D 虚拟形象动画,增强平台互动性和用户粘性。
- 体育与健康分析:通过精确的人体姿态估计,分析运动员的动作姿态,提供训练建议或用于康复评估。
- 人机交互与元宇宙:为虚拟数字人提供实时、自然的动作驱动能力,应用于虚拟客服、虚拟主播、VR/AR 社交等场景。


