#21 AI の評価が新しい計算ボトルネックになっている?
カートのアイテムが多すぎます
ご購入は五十タイトルがカートに入っている場合のみです。
カートに追加できませんでした。
しばらく経ってから再度お試しください。
ウィッシュリストに追加できませんでした。
しばらく経ってから再度お試しください。
ほしい物リストの削除に失敗しました。
しばらく経ってから再度お試しください。
ポッドキャストのフォローに失敗しました
ポッドキャストのフォロー解除に失敗しました
-
ナレーター:
-
著者:
Hugging Face / EvalEval Coalition のブログ "AI evals are becoming the new compute bottleneck" を読んで、AI評価のコスト問題について話しました。HAL、GAIA、τ-bench、PaperBench の実コスト、pass^k による信頼性測定、Every Eval Ever の取り組みなどを扱います。
adbl_web_anon_alc_button_suppression_t1
まだレビューはありません