『#21 AI の評価が新しい計算ボトルネックになっている?』のカバーアート

#21 AI の評価が新しい計算ボトルネックになっている?

#21 AI の評価が新しい計算ボトルネックになっている?

無料で聴く

ポッドキャストの詳細を見る

Hugging Face / EvalEval Coalition のブログ "AI evals are becoming the new compute bottleneck" を読んで、AI評価のコスト問題について話しました。HAL、GAIA、τ-bench、PaperBench の実コスト、pass^k による信頼性測定、Every Eval Ever の取り組みなどを扱います。

adbl_web_anon_alc_button_suppression_t1
まだレビューはありません