ページを読み込み中…
ページを読み込み中…
5件の記事
Preferred Networks は、生成 AI のアライメントに不可欠な評価指標である報酬モデルについて、英語中心の現状に対し、日本語特性に対応した強固なモデルを PLaMo を基盤として構築したと発表した。
Preferred NetworksがLLM PLaMo開発で、日本語の自然さを評価するベンチマーク手法を検証。英語と異なり日本語向けの評価基準構築が重要と指摘。
HEROZ社が提供するAIサービス「HEROZ ASK」がGPT-4oに対応し、RAG(Retrieval-Augmented Generation)機能を強化した。GPT-4oはテキスト性能や日本語RAGの精度が向上し、AIアシスタント作成に活用できる。
LLM-jp が事前学習や安全性を改善した LLM-jp-13B v2.0 を商用利用可能なライセンスで公開した。
著者がlm-evaluation-harnessとJGLUEデータセットを使用し、FintanPromptやAlpacaPromptなど複数のプロンプトバージョンによる日本語LLMの評価結果を比較し、各プロンプトの特性を分析した。