ページを読み込み中…
2件の記事
Airbnbは信頼性の高い生成AI製品構築のため、評価を事後対応ではなくエンジニアリングの第一級分野として扱う手法を共有した。
Airbnbは非確定的なLLMシステムの開発において、信頼できる実験と評価設計の重要性を指摘し、モデル改善の反復を可能にするためLLM評価プロセスを数週間から1日に短縮する手法を開発した。