人工智能生成舞蹈
NVIDIA最新深度学习模型:根据音乐自动编舞
AI Dancing
Facebook Research
Facebook AI研究人员开发了一种系统,该系统可使机器为任何输入的音乐生成舞蹈。它不仅仅是模仿人类的舞蹈动作,而是可以创建极富创意的舞蹈。研究人员认为,人工智能的舞蹈更具创造力和启发性。
AI生成了人类想象不到的舞蹈动作
(记得领取文末福利)
工作方式
1 在两个不同的时间点检测歌曲中的可量化相似性
2 在巨大的舞步序列矩阵中搜索相似的模式
说人话版(工作方式)
1 给定输入音乐(上图)
2 生成作为离散状态序列(中图)的对齐舞蹈编排
3 利用该序列映射到各种可视化(例如,人形杆形姿势变化,下图)
由于该系统确保其动作与音乐保持同步,只要输入的音乐不同,它总能生成新颖的舞蹈动作。
Bravo Tango
论文:
https://arxiv.org/pdf/2006.11905.pdf
代码:
https://github.com/purvaten/feel-the-music
项目地址: