このスペイン語の音声クリップを聞いてみよう。

この音声クリップを従来の自動翻訳システムで英語に翻訳すると、次のようになる。

そしてこちらが、グーグルの新しい自動翻訳システムを利用した場合のものである。

完璧ではないものの、グーグルの翻訳システムでは、元の話者の声と口調がある程度維持されていることがわかる。グーグルの翻訳システムは、音声入力を音声出力に直接変換しているからだ。その間に他のステップはない。それに対して従来の翻訳システムは、音声を一旦テキストに変換し、そのテキストを翻訳した後、再度音声を合成している。そのため、その過程で元の声の特徴が失われてしまう。

「トランスラトトロン（Translatotron）」と名付けられたこの新しいシステムには3つのコンポーネントがあり、そのすべてが、話者の音声スペクトログラムを調べている。音声スペクトログラムとは、再生されている音の周波数分布のスナップショットを視覚化したもので、一般的に声紋と呼ばれる。トランスラトトロンの最初のコンポーネントでは、入力言語の声紋を出力言語の声紋にマッピングするように訓練したニューラル・ネットワークを使用する。2つめのコンポーネントは、マッピングした声紋を、再生可能な音声の波形に変換する。その後、3つめのコンポーネントが、元の話者の声の特徴を、最終的な音声出力に被せて戻す。

このアプローチによって、言葉には表されない重要な情報が維持され、より繊細な表現の翻訳が可能になるだけでなく、理論的には、翻訳ミスが最小限に抑えられる。ステップがより少なくなるからだ。

トランスラトトロンは現在、研究者らが概念実証をしている段階だ。テストでは、精選された訓練用データがすでに大量に確保されているスペイン語から英語への翻訳だけを試みている。だが、上の音声クリップを聞くと、いずれは商用システムとして実用化される可能性がありそうだ。その他の音声クリップはこちらから確認できる。

• 1363
• 121
• 11
• 0

人気の記事ランキング

1. Don’t change your DNA at home, says America’s first CRISPR law 「家庭でのゲノム編集禁止」 カリフォルニア州で 初のCRISPR法が成立
2. Astronomers have discovered the largest black hole ever observed 太陽の400億倍の質量、観測史上最大のブラックホール見つかる
3. Interview with Lessig: Privacy Regulation in the Data-Driven-Society ローレンス・レッシグに聞く、データ駆動型社会のプライバシー規制
4. You’re very easy to track down, even when your data has been anonymized 郵便番号と性別・生年月日だけで個人の特定は可能、新研究で判明
5. What a lack of unexplained gory deaths tells us about dark matter 原因不明の「銃創探し」からダークマターの特徴を導く新研究