NEWS

人工知能DXスタートアップ「UPSTAGE」、韓国語AIモデルが評価できる「KLUEリーダーボード」正式リリース

2021-08-03    hit . 60536


2021.08.02 10:59
全世界の人工知能コンテストKaggle(カグル)で1位受賞など、最高の技術力と認められているAI専門スタートアップ、UPSTAGE(アップステージ)社が
韓国語AIモデルが評価できるKLUEリーダーボードを正式リリースすると2日に発表した。

KLUE(Korean Language Understanding Evaluation Benchmark、クルー)はUPSTAGE社が
韓国語の自然言語処理(NLP)関連の産学系の専門家たちとともに7カ月に渡って開発した最初の韓国語の自然言語理解評価関連の公開データセットである。

今まで自然言語理解研究の基になれるデータセットとリーダーボードは英語基盤で作られていて、制限も多く、研究に向いていなかった。
AIの韓国語理解能力を評価できるKLUEは再配布、再加工、営利的活用なども可能で韓国語自然言語処理分野の発展を導けると期待されている。

このKLUE開発を主導したUPSTAGE社は韓国語AIモデルの性能を測れるKLUEリーダーボードをリリースした。

AIモデルの評価を受けようとする場合、KLUEプロジェクトホームページに接続してデータセットをダウンロードした後、
評価しようとするAIモデルを学習させてからリーダーボードに提出するとモデルの性能水準を総合的に点数として評価できる。

評価項目は文章の主題分類、文章の類似度比較、自然言語推論、個体名の認識、関係抽出、形態素及び依存構文分析、
機械読解の理解、対話状態追跡などの8つの項目に分けて信頼度を高めた。

AIモデルの開発者は自分が作ったモデルが韓国語の正確な理解と推論能力を持っているかを客観的な指標で評価される。
特に公開議論ルームを中心に参与した開発者間の情報と意見交換もできて、公正な競争の中でAI言語モデルをアップグレードすることもできる。
もっと詳細な内容はKLUEホームページから確認できる。

UPSTAGE社の代表取締役であるS.H.KIM(キム・スンフン)氏は
「KLUEリーダーボードが様々な韓国語AIモデルの評価と研究の交流の場になれることを期待している」とし、
「これからもUPSTAGEの優れた技術力を基に韓国語AI研究生態系を広め、国内AI産業発展の足しになるため努力していくつもり」と述べた。


※本件についてお問い合わせ事項がございましら、当ホームページの「お申込み/お問い合わせ」又は下記の連絡先へご連絡お願い致します。
部署名:SEOIL E&M 企画マーケティンググループ
TEL :+82)2-6204-2033
E-mail : pl@seoilenm.com