Dance AI for Beginners

2018/10

In the break dance (bboying) which is spreading widely in recent years, we developed a system which automatically discriminates the motion and feeds back the result. This system incorporates an AI that uses deep learning of actions in a natural environment using shoes incorporating an acceleration sensor (Smart Footwear Orphe), and classifies skills and steps of a dancer in real time You can evaluate its proficiency degree.

Now that dance has become compulsory at the educational site, it will be helpful to leaders who are not familiar with dancing. Through this system we aim to spread the dance to the general public and further expand the expression by dancers.

近年広く普及しつつあるブレイクダンスにおいて、動作を自動的に判別してその結果をフィードバックするシステムを開発した。 このシステムには、加速度センサーを組み込んだ靴（スマートフットウェア Orphe）を使用し自然な環境下での動作を深層学習させたAIが組み込まれており、 リアルタイムでダンサーの技やステップを分類したりその熟達度を評価したりすることができる。

教育現場でダンスが必修化された昨今、ダンスに詳しくない指導者の手助けにもなるであろう。 このシステムを通して一般社会へのダンスの普及やダンサーの表現をより拡張することを目指していく。

[Credit]
Director, Developer : Naoyuki Hirasawa
Researcher : Daichi Shimizu
Special Thanks: Junya Chikob, Tomoya Kotegawa, Tomohiro Matsuba, Jun Aoyama

• Dance AI Recognizes The Movements of Breakdance by Deep Learning
• 2018アジアデジタルアート大賞展FUKUOKA エンターテインメント（産業応用）部門 入賞