KADOKAWA Technology Review
×
「Innovators Under 35 Japan」2024年度候補者募集中!
ミッドジャーニーが生殖器官の入力を禁止、生成AIの悪用防ぐには
Julia Rockwell
人工知能(AI) 無料会員限定
AI image generator Midjourney blocks porn by banning words about the human reproductive system

ミッドジャーニーが生殖器官の入力を禁止、生成AIの悪用防ぐには

画像生成AI「ミッドジャーニー」で、プロンプト(指示テキスト)に生殖器官を指す言葉を使うことが禁じられていることが分かった。性的な画像や猟奇的な画像の生成を防ぐための一時的な措置だという。 by Melissa Heikkilä2023.03.01

人気の人工知能(AI)画像生成ツール「ミッドジャーニー(Midjourney)」が、人間の生殖器官に関するさまざまな言葉を、プロンプト(指示テキスト)として使用禁止にしていることが、MITテクノロジーレビューの取材で分かった。

「胎盤」「卵管」「乳腺」「精子」「子宮」「尿道」「子宮頸部」「処女膜」「外陰部」などの言葉をユーザーが入力すると、ミッドジャーニーはこれらの言葉が禁止されていると警告を出し、使用を認めない。これらの単語を試したユーザーは、禁止コンテンツの生成を試みたとして、一定期間使用禁止となることもある。一方で、「肝臓」や「腎臓」など、人体に関連する他の単語は許可されている。

ミッドジャーニーのデイヴィッド・ホルツ創業者兼最高経営責任者(CEO)は、生殖器官に関連する言葉を禁止することについて、同社が「AIを改善する」間、ユーザーがショッキングなコンテンツ、あるいは猟奇的なコンテンツを生成してしまうことを防ぐための応急処置だとしている。ホルツCEOによると、ユーザーの言葉の使い方や、ミッドジャーニーが生成している画像の内容をモデレーターが観察し、定期的に禁止用語を調整しているとのことだ。同社はコミュニティ・ガイドラインのページで、この方式でブロックされるコンテンツの種類を挙げている。その中には、性的・猟奇的な画像のみならず、お尻のシンボルとしてネット上でよく使われている絵文字🍑まで含まれている。

ミッドジャーニー、ダリー2(DALL-E 2)、ステーブル・ディフュージョン(Stable Diffusion)などのAIモデルは、インターネットから収集された何十億もの画像を学習している。ワシントン大学のチームによる研究では、こうしたAIモデルが女性を性的な対象物とするバイアスを学習し、そのバイアスが生成画像に反映されていることが判明している。データ・セットの規模が膨大であるため、性的な画像、猟奇的な画像、バイアスがかかった出力につながる可能性のある画像など、望ましくない画像を排除することは、ほぼ不可能に等しい。データ・セットに頻繁に登場する画像ほど、AIモデル内で強いつながりが形成され、モデルが生成する画像に現れる可能性が高くなる。

ミッドジャーニーの禁止用語は、この問題に対処するための暫定的な試みだ。「精子」や「睾丸」など、男性の生殖器官に関連する単語も禁止となっている …

こちらは会員限定の記事です。
メールアドレスの登録で続きを読めます。
有料会員にはメリットがいっぱい!
  1. 毎月120本以上更新されるオリジナル記事で、人工知能から遺伝子療法まで、先端テクノロジーの最新動向がわかる。
  2. オリジナル記事をテーマ別に再構成したPDFファイル「eムック」を毎月配信。
    重要テーマが押さえられる。
  3. 各分野のキーパーソンを招いたトークイベント、関連セミナーに優待価格でご招待。
人気の記事ランキング
  1. Promotion Call for entries for Innovators Under 35 Japan 2024 「Innovators Under 35 Japan」2024年度候補者募集のお知らせ
  2. AI companies are finally being forced to cough up for training data 「訓練データはタダではない」音楽業界が問う生成AIの根本的問題
  3. AI is poised to automate today’s most mundane manual warehouse task パレット積載ロボに「AI後付け」、物流問題の現実解に挑む
  4. Lego bricks are making science more accessible 科学を身近にするレゴブロック、大学の実験装置にも応用
日本発「世界を変える」U35イノベーター

MITテクノロジーレビューが20年以上にわたって開催しているグローバル・アワード「Innovators Under 35 」。2024年も候補者の募集を開始しました。 世界的な課題解決に取り組み、向こう数十年間の未来を形作る若きイノベーターの発掘を目的とするアワードの日本版の最新情報を随時発信中。

特集ページへ
MITTRが選んだ 世界を変える10大技術 2024年版

「ブレークスルー・テクノロジー10」は、人工知能、生物工学、気候変動、コンピューティングなどの分野における重要な技術的進歩を評価するMITテクノロジーレビューの年次企画だ。2024年に注目すべき10のテクノロジーを紹介しよう。

特集ページへ
フォローしてください重要なテクノロジーとイノベーションのニュースをSNSやメールで受け取る