株式会社Elith、サイバーエージェントとrinnaが発表した2つの日本語LLMの性能比較に関する技術調査内容を週刊エーアイElithで発表

サイバーエージェントとrinnaが発表した2つの日本語LLMの性能を比較に関する調査を実施

AIの研究と開発を手掛ける株式会社Elith（東京都渋谷区）は、サイバーエージェントとrinnaが発表した2つの日本語LLMの性能を比較に関する技術調査を実施した。週刊エーアイElithを通じて、オープンソースである強みを生かして、大規模な日本語データセットを学習し、より大規模な言語モデルの開発の必要性について論じた。

AIに関する研究、開発、設計、企画、教育、販売、保守、コンサルティング業務を展開する株式会社Elith (本社：東京都渋谷区恵比寿西2-3-13-601) は、5月22日、週刊エーアイElithでサイバーエージェントとrinnaが発表した2つの日本語LLMの性能を比較の技術調査内容を発表いたします。

【週刊エーアイElithとは？】

週刊エーアイElithでは、株式会社Elith(エリス)によって運用される日々の機械学習のニュース・OSS・研究・技術・学会・国内外AI企業の情報を毎週月曜日に配信するニュースレターです。

国内外の最新のAI情報をキャッチアップをする場合、

AI系で第一線で活躍するエンジニア・研究者のSNSアカウントの情報をキャッチする

OSSを運営している団体のブログを読む

国外のテック系のニュース記事を読む

国際学会に参加する

少数の日本語で書かれた有益なニュースレターを読む

などのアクションが考えられますが非常に労力を要します。このニュースレターでは、日頃から機械学習系の研究者でない方にもトレンドをキャッチしていただけるように情報をまとめて配信します。

週刊エーアイElith：https://elith.substack.com/p/elith-issue-18

【調査内容】

今回の調査では、サイバーエージェントとrinnaが発表した2つの日本語LLM（言語モデル）の性能を比較しました。サイバーエージェントはHugging Face Hubでオープンな日本語データで学習されたモデルを公開しました。rinnaは汎用GPT言語モデルと対話GPT言語モデルを公開しました。それぞれのモデルは異なる学習データセットを使用しています。調査では、CALM、rinna、GPT-3.5の3つのモデルに対して性能を比較するための質問を用意しました。

ただし、今回の調査はモデルの性能比較よりも、公開されているモデルの性能を把握し、オープンソースなLLMの活用方法やアップデートについて検討する材料とすることを目的としています。

【こんな方におすすめです】

以下は対象者とどんな情報を取捨選択すると良いかを記載しています。

ケース①

対象：AIに興味のあるビジネスマン

情報：国内外のAIのニュース

ケース②

対象：AI分野を対象にしたベンチャーキャピタル

情報：国内外のAIのニュース/AI企業・動向のレポート

ケース③

対象：AIスタートアップ関係者

情報：国内外のAIのニュース/AI企業・動向のレポート/学会情報

ケース④

対象：機械学習エンジニア/データサイエンティスト/研究者

情報：学会情報/OSS/AI技術/研究内容

【ニュースレターの内容】

基本的には配信する記事の内容は無料です。配信する内容は、日々の機械学習のニュース・OSS・研究・技術・学会・国内外AI企業の情報などです。

学会情報をまとめたレポートや、特定の技術の深くまで解説した技術記事、関連企業の動向をまとめたレポートなどは増刊号として配信予定であり、一部有料化する予定ですが予めご了承ください。

【株式会社Elithについて】

社名：株式会社Elith

代表者：代表取締役 若林怜帆人、取締役CEO兼CTO 井上顧基

本社所在地：東京都渋谷区恵比寿西2-3-13-601

会社概要 URL：https://elith.co.jp

【本プレスリリースに関するお問い合わせ先】 

株式会社Elith Eメール：[e-mail]