フラッシュ2023年5月17日

• サイバーエージェントが大規模言語モデルを公開、商業利用も可能

  by MITテクノロジーレビュー編集部 [MIT Technology Review Japan]

  サイバーエージェントは2023年5月17日、最大68億パラメータの日本語大規模言語モデル（LLM：Large Language Model）を、機械学習プラットフォーム「ハギング・フェイス・ハブ（Hugging Face Hub）」で一般公開した。商用利用可能な「CC BY-SA 4.0ライセンス」で提供しており、同モデルをベースとしてチューニングをすることにより、対話型人工知能（AI）などの開発が可能となる。

  同社は、ウィキペディア（Wikipedia）およびコモン・クロール（Common Crawl）のオープンな日本語データを用いて同モデルを訓練している。既存の大規模言語モデルのほとんどは英語を中心に学習されており、現状では日本語および日本文化に強いLLMは少ないという。今回の大規模言語モデルは、現時点では日本国内における公開モデルにおいて最大級の規模であり、大規模な日本語データを活かした独自モデルを開発したことで、従来より自然な日本語の文章生成が可能になるとしている。

  今回の発表に先立ってサイバーエージェントは、130億パラメーターまでの大規模言語モデルの開発を完了したことを5月11日に発表。同社の「極予測AI」「極予測TD」「極予測LP」などAIを活用した広告クリエイティブ制作領域のサービスにおいて活用を始めている。

  （中條）

  • 6

• 人気の記事ランキング

  1. Young organs may not be a fountain of youth for recipients 若い心臓は体に合わせて老いる——プーチンには残念な研究結果
  2. Promotion How AI could reshape Japan’s white-collar workforce 【10/6開催】AIで浮いた人材、次の一手は地方に——冨山和彦氏ら登壇
  3. The specter of AI-enabled bioweapons is a wake-up call for biotech AIが生物兵器を生む日——6時間で毒性分子4万個の衝撃
  4. When can we say AI made a scientific discovery? AIを「発見の主体」に据えるAI企業、科学の営みとのずれ
  5. How ideas of a vast censorship network moved from the online fringe to Trump policy 陰謀論は国をどう動かしたか 「検閲産業複合体」説を 追った9カ月調査