KADOKAWA Technology Review
×
「あなたの声」のまま変換、グーグルの新しい翻訳システム
Google’s AI can now translate your speech while keeping your voice

「あなたの声」のまま変換、グーグルの新しい翻訳システム

グーグルが、ある言語で入力した音声を、話者の声の特徴を保ったまま別の言語の音声で出力する自動翻訳システムを開発した。ある言語での話者の「声紋」を別の言語にマッピングするように訓練したニューラルネットワークを利用する。 by Karen Hao2019.05.22

このスペイン語の音声クリップを聞いてみよう。

この音声クリップを従来の自動翻訳システムで英語に翻訳すると、次のようになる。

そしてこちらが、グーグルの新しい自動翻訳システムを利用した場合のものである。

完璧ではないものの、グーグルの翻訳システムでは、元の話者の声と口調がある程度維持されていることがわかる。グーグルの翻訳システムは、音声入力を音声出力に直接変換しているからだ。その間に他のステップはない。それに対して従来の翻訳システムは、音声を一旦テキストに変換し、そのテキストを翻訳した後、再度音声を合成している。そのため、その過程で元の声の特徴が失われてしまう。

トランスラトトロン(Translatotron)」と名付けられたこの新しいシステムには3つのコンポーネントがあり、そのすべてが、話者の音声スペクトログラムを調べている。音声スペクトログラムとは、再生されている音の周波数分布のスナップショットを視覚化したもので、一般的に声紋と呼ばれる。トランスラトトロンの最初のコンポーネントでは、入力言語の声紋を出力言語の声紋にマッピングするように訓練したニューラル・ネットワークを使用する。2つめのコンポーネントは、マッピングした声紋を、再生可能な音声の波形に変換する。その後、3つめのコンポーネントが、元の話者の声の特徴を、最終的な音声出力に被せて戻す。

このアプローチによって、言葉には表されない重要な情報が維持され、より繊細な表現の翻訳が可能になるだけでなく、理論的には、翻訳ミスが最小限に抑えられる。ステップがより少なくなるからだ。

トランスラトトロンは現在、研究者らが概念実証をしている段階だ。テストでは、精選された訓練用データがすでに大量に確保されているスペイン語から英語への翻訳だけを試みている。だが、上の音声クリップを聞くと、いずれは商用システムとして実用化される可能性がありそうだ。その他の音声クリップはこちらから確認できる。

人気の記事ランキング
  1. The guy who made a tool to track women in porn videos is sorry 顔認識でポルノ出演女性を特定、残念なプログラマーのひと騒動
  2. AI’s white guy problem isn’t going away AI業界の「白人男性偏重」がなくならない根本的な理由
  3. Google’s AI can now translate your speech while keeping your voice 「あなたの声」のまま変換、グーグルの新しい翻訳システム
  4. The new benchmark quantum computers must beat to achieve quantum supremacy スパコンと量子コンピューターは結局どちらが速いのか?
カーレン・ハオ [Karen Hao]米国版 AI担当記者
MITテクノロジーレビューの人工知能(AI)担当記者。特に、AIの倫理と社会的影響、社会貢献活動への応用といった領域についてカバーしています。AIに関する最新のニュースと研究内容を厳選して紹介する米国版ニュースレター「アルゴリズム(Algorithm)」の執筆も担当。グーグルX(Google X)からスピンアウトしたスタートアップ企業でのアプリケーション・エンジニア、クオーツ(Quartz)での記者/データ・サイエンティストの経験を経て、MITテクノロジーレビューに入社しました。
人気の記事ランキング
  1. The guy who made a tool to track women in porn videos is sorry 顔認識でポルノ出演女性を特定、残念なプログラマーのひと騒動
  2. AI’s white guy problem isn’t going away AI業界の「白人男性偏重」がなくならない根本的な理由
  3. Google’s AI can now translate your speech while keeping your voice 「あなたの声」のまま変換、グーグルの新しい翻訳システム
  4. The new benchmark quantum computers must beat to achieve quantum supremacy スパコンと量子コンピューターは結局どちらが速いのか?
フォローしてください重要なテクノロジーとイノベーションのニュースをSNSやメールで受け取る