アジア市場向けの巨大言語モデルの作成
AI言語データ企業のFlittoは、AIテック企業Upstageとの協力を発表し、大規模な言語モデル(LLMs)を向上させることを目的としています。彼らの主な焦点は、アジア地域で広く使用されているタイ語、日本語、ベトナム語、ラオス語、クメール語などの低リソース言語を収集し、LLMのパフォーマンスを向上させることです。
協力の目的
この戦略的パートナーシップには、韓国のLLMランキング「Ko-LLM」の開発、多言語LLMランキングの管理、そして低リソース言語を活用してLLMを地域化することが含まれます。両社は企業の要求に応じたより小規模な言語モデルデータセット(sLLMs)でAI言語モデルの洗練度を向上させることを目指しています。
言語モデルの正確性向上
Flittoは、多言語パラレルコーパスの作成や著作権の問題がない豊富なデータセットを活用し、言語コレクションテクノロジーの競争力を高める計画です。一方、Upstageは、低リソース言語向けの高品質データを確保し、事前トレーニング済みのLLMである「Sola」を拡大することを目指しています。Solaは、すでに韓国語と英語に対応しており、年内には日本語やタイ語などのさらなる言語をサポートする予定です。
AIエコシステムへの期待される影響
両社の代表者は、この取り組みの戦略的重要性を強調しています。FlittoのCEOは、低リソース言語を学ぶことがLLMのパフォーマンス向上の鍵であると強調し、Upstageのリーダーシップは、グローバルなAIイノベーションにおける高品質データの必要性を強調しました。この提携は、国内のAIエコシステムへのポジティブな貢献と生成AIのグローバルなエクスペリエンスを向上させる有望な一歩と見られています。
何か疑問があればお知らせください。