跳到正文
热点事件持续更新

NVIDIA Research发布JCA联合生成3D运动与视频

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

NVIDIA Research 发布论文与项目页,提出联合生成模型 JCA:给定文本提示和任意拓扑骨架,可同时生成视频与同步的 3D 运动,并预测关节在画面中的位置以反解相机,将运动对齐到 3D 场景。 据其介绍,JCA 用少量 cross-attention 层把支持任意骨架的 3D 运动模型与预训练视频模型连接起来,训练使用近 200K 个训练对;此外还支持用关键帧控制运动轨迹、视频转骨架运动以及骨架运动转视频。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. Hacker News
    NVIDIA 提出 JCA:为任意骨架联合生成 3D 运动与视频

    NVIDIA Research 提出 JCA 模型,可从文本提示为任意拓扑骨架联合生成视频与同步 3D 运动,并通过预测关节在画面中的位置反解相机、将运动对齐到 3D 场景。该模型将支持任意骨架的 3D 运动模型与预训练视频模型通过少量 cross-attention 层连接,用近 200K 训练对训练。JCA 还支持关键帧控制运动轨迹、视频转骨架运动与骨架运动转视频。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。