機械学習システム、ダンスダンスレボリューションでダンスを創作
ダンスダンスレボリューションのユーザー作成データを使って、機械学習にダンスのパターンを訓練したところ、楽曲の入力に対してダンスのステップを生成する機械学習モデルを開発できた。 by Emerging Technology from the arXiv2017.03.31
ダンスダンスレボリューション(DDR)は、20世紀の終わりに流行った有名なビデオゲームだ。登場時は新規性で大成功したが、その後20年近く過ぎた今でも、人気は続いている。
https://www.youtube.com/watch?v=j1syidFF4nw
DDRは、画面と、プレーヤーが足で操作をするダンス台を使うダンスゲームだ。台には4つのパッドがあり、プレーヤーは画面上の譜面に示される通りに、音楽に合わせてパッドにタッチする。つまり、プレーヤーは画面の要求どおりに音楽に合わせてダンスしなければならない。
DDRは、プレーヤーが独自のダンスを作って配布できる。長年に渡って、ファンは数多くの流行曲向けに巨大なダンス・データベースを作ってきた。
カリフォルニア大学サンディエゴ校のクリス・ドナヒュー研究員のチームは、この巨大なデータベースからアイデアを得て、深層学習機械に独自のダンスを作らせる訓練に使えないか、と考えた。
3月28日、研究チームはその手法を披露した。研究チームのシステム(「ダンスダンスコンボリュージョン」) は、ポップソングのRAW形式の音声ファイルを入力すると、ダンスのステップを生成する。つまり、音楽の振り付けができる機械だ。
DDRのルールは単純だ。音楽が流れるのに合わせて、プレーヤーは画面に表示された順番通りにダンス台のパッドにタッチする。各パッドは、オン、オフ、ホールド(またはフリーズ)、リリースの、どれかひとつの状態になる。4つのパッドは個別にタッチしたり、触れない状態になったりするので、音楽が再生されている間、どの瞬間でもステップの組み合わせは256通り(44)ある。
ゲームなので、ダンスには難易度が設定されている。ほとんどの曲には、リズムの分割スピードによって決まる5段階の難易度がある。初心者レベルでは、4分の1拍子か …
- 人気の記事ランキング
-
- How lasers could help provide fuel for nuclear reactors 核廃棄物は「地上ウラン鉱山」、レーザー濃縮で再生を狙う
- Supercooled kidneys have been transplanted into pigs in a “landmark achievement” ブタ腎臓を過冷却で保存、 72時間後の再移植に成功 ——臨床標準より回復速く
- How an overlooked geothermal plant got a second chance もっと深く掘れ——採算割れの地熱発電所を米新興企業が再生
- OpenAI called the Hugging Face attack unprecedented. But we’ve been here before. 「AIの暴走」ではない、オープンAIのモデルが不正侵入した理由