機械学習システム、ダンスダンスレボリューションでダンスを創作
ダンスダンスレボリューションのユーザー作成データを使って、機械学習にダンスのパターンを訓練したところ、楽曲の入力に対してダンスのステップを生成する機械学習モデルを開発できた。 by Emerging Technology from the arXiv2017.03.31
ダンスダンスレボリューション(DDR)は、20世紀の終わりに流行った有名なビデオゲームだ。登場時は新規性で大成功したが、その後20年近く過ぎた今でも、人気は続いている。
https://www.youtube.com/watch?v=j1syidFF4nw
DDRは、画面と、プレーヤーが足で操作をするダンス台を使うダンスゲームだ。台には4つのパッドがあり、プレーヤーは画面上の譜面に示される通りに、音楽に合わせてパッドにタッチする。つまり、プレーヤーは画面の要求どおりに音楽に合わせてダンスしなければならない。
DDRは、プレーヤーが独自のダンスを作って配布できる。長年に渡って、ファンは数多くの流行曲向けに巨大なダンス・データベースを作ってきた。
カリフォルニア大学サンディエゴ校のクリス・ドナヒュー研究員のチームは、この巨大なデータベースからアイデアを得て、深層学習機械に独自のダンスを作らせる訓練に使えないか、と考えた。
3月28日、研究チームはその手法を披露した。研究チームのシステム(「ダンスダンスコンボリュージョン」) は、ポップソングのRAW形式の音声ファイルを入力すると、ダンスのステップを生成する。つまり、音楽の振り付けができる機械だ。
DDRのルールは単純だ。音楽が流れるのに合わせて、プレーヤーは画面に表示された順番通りにダンス台のパッドにタッチする。各パッドは、オン、オフ、ホールド(またはフリーズ)、リリースの、どれかひとつの状態になる。4つのパッドは個別にタッチしたり、触れない状態になったりするので、音楽が再生されている間、どの瞬間でもステップの組み合わせは256通り(44)ある。
ゲームなので、ダンスには難易度が設定されている。ほとんどの曲には、リズムの分割スピードによって決まる5段階の難易度がある。初心者レベルでは、4分の1拍子か …
- 人気の記事ランキング
-
- The winners of Innovators under 35 Japan 2024 have been announced MITTRが選ぶ、 日本発U35イノベーター 2024年版
-
Promotion
The winners of Innovators under 35 Japan 2024 have been announced
MITTRが選ぶ、
日本発U35イノベーター
2024年版 - AI will add to the e-waste problem. Here’s what we can do about it. 30年までに最大500万トン、生成AIブームで大量の電子廃棄物
- Kids are learning how to make their own little language models 作って学ぶ生成AIモデルの仕組み、MITが子ども向け新アプリ
- OpenAI brings a new web search tool to ChatGPT チャットGPTに生成AI検索、グーグルの牙城崩せるか