機械学習システム、ダンスダンスレボリューションでダンスを創作
ダンスダンスレボリューションのユーザー作成データを使って、機械学習にダンスのパターンを訓練したところ、楽曲の入力に対してダンスのステップを生成する機械学習モデルを開発できた。 by Emerging Technology from the arXiv2017.03.31
ダンスダンスレボリューション(DDR)は、20世紀の終わりに流行った有名なビデオゲームだ。登場時は新規性で大成功したが、その後20年近く過ぎた今でも、人気は続いている。
https://www.youtube.com/watch?v=j1syidFF4nw
DDRは、画面と、プレーヤーが足で操作をするダンス台を使うダンスゲームだ。台には4つのパッドがあり、プレーヤーは画面上の譜面に示される通りに、音楽に合わせてパッドにタッチする。つまり、プレーヤーは画面の要求どおりに音楽に合わせてダンスしなければならない。
DDRは、プレーヤーが独自のダンスを作って配布できる。長年に渡って、ファンは数多くの流行曲向けに巨大なダンス・データベースを作ってきた。
カリフォルニア大学サンディエゴ校のクリス・ドナヒュー研究員のチームは、この巨大なデータベースからアイデアを得て、深層学習機械に独自のダンスを作らせる訓練に使えないか、と考えた。
3月28日、研究チームはその手法を披露した。研究チームのシステム(「ダンスダンスコンボリュージョン」) は、ポップソングのRAW形式の音声ファイルを入力すると、ダンスのステップを生成する。つまり、音楽の振り付けができる機械だ。
DDRのルールは単純だ。音楽が流れるのに合わせて、プレーヤーは画面に表示された順番通りにダンス台のパッドにタッチする。各パッドは、オン、オフ、ホールド(またはフリーズ)、リリースの、どれかひとつの状態になる。4つのパッドは個別にタッチしたり、触れない状態になったりするので、音楽が再生されている間、どの瞬間でもステップの組み合わせは256通り(44)ある。
ゲームなので、ダンスには難易度が設定されている。ほとんどの曲には、リズムの分割スピードによって決まる5段階の難易度がある。初心者レベルでは、4分の1拍子か …
- 人気の記事ランキング
-
- America’s new dietary guidelines ignore decades of scientific research 「ステーキとバターを食べよ」米国の新食事ガイドラインが波紋
- This company is developing gene therapies for muscle growth, erectile dysfunction, and “radical longevity” まず筋肉増強、勃起不全・薄毛も——「長寿」治療謳う企業が試験
- Text-to-image AI models can be tricked into generating disturbing images AIモデル、「脱獄プロンプト」で不適切な画像生成の新手法
- Meet the man hunting the spies in your smartphone 20年間、独裁国家を追った研究者は今、米国を監視している