技术内容

MotionScore是将人的动作乐谱化的一项新技术。
现在,用于制御CG角色或是机器人的动作的运动数据,像影像数据一样,用帧(1/60秒的短时间单位)来管理。
现实中人的动作比如跳舞等被认为是节拍(拍子、节奏)。但实际上,练习舞蹈时一定会喊着“1、2、3、4!”,不过即使跳错了也没人会说“是的,从第3秒到4秒后请抬脚”。
本技术着眼于此点,把目前像“从第3秒到3.5秒往前伸右手”一样记述的运动数据,改变成像“从第2拍到第3拍往前伸右手”一样的记述。总而言之,用节拍来控制动作。
根据这个创意,用MIDI(PC上的乐谱数据)把人的动作用极其相似的形式已成功记录下来了。
利用MotionScore,可实现现场和舞蹈影像・机器人的共同表演、或是把舞蹈作为其中的伴舞等。

视频请点击这里

展示内容

1、虚构舞者
将向大家介绍与音乐同步跳舞的舞者。舞者会根据玩家的点击作出相应的反应,同步地改变舞步。
2、ODDLETTER
ODDLETTER是用于MotionScore的简单APP。使用这个APP,仅需拍照,被拍的人即可以翩翩起舞。
目前此APP已在发行中,无缘来到现场的用户请务必下载尝试。

讲 评

通常帧单位制御的运动数据,比起着眼于人的感觉到的“节奏”,作为更拟人的数据被抽象,甚至利用它对各种动作制御的反馈这点很崭新。