NVIDIA最新深度学习模型:根据音乐自动编舞

AI Dancing

Facebook Research

Facebook AI研究人员开发了一种系统,该系统可使机器为任何输入的音乐生成舞蹈。它不仅仅是模仿人类的舞蹈动作,而是可以创建极富创意的舞蹈。研究人员认为,人工智能的舞蹈更具创造力和启发性。

AI生成了人类想象不到的舞蹈动作

(记得领取文末福利)

工作方式

1 在两个不同的时间点检测歌曲中的可量化相似性

2 在巨大的舞步序列矩阵中搜索相似的模式

说人话版(工作方式)

1 给定输入音乐(上图)

2 生成作为离散状态序列(中图)的对齐舞蹈编排

3 利用该序列映射到各种可视化(例如,人形杆形姿势变化,下图)

由于该系统确保其动作与音乐保持同步,只要输入的音乐不同,它总能生成新颖的舞蹈动作。

Bravo Tango

论文:

https://arxiv.org/pdf/2006.11905.pdf

代码:

https://github.com/purvaten/feel-the-music

项目地址:

https://sites.google.com/view/dancing-agents

标签: none

添加新评论

人机验证正在加载....