Measuring Brilliance in Generative AI: Perplexity, Precision, and Faithfulness

カートのアイテムが多すぎます

ご購入は五十タイトルがカートに入っている場合のみです。

カートに追加できませんでした。

しばらく経ってから再度お試しください。

ウィッシュリストに追加できませんでした。

しばらく経ってから再度お試しください。

ほしい物リストの削除に失敗しました。

しばらく経ってから再度お試しください。

ポッドキャストのフォローに失敗しました

ポッドキャストのフォロー解除に失敗しました

Measuring Brilliance in Generative AI: Perplexity, Precision, and Faithfulness

無料で聴く

ポッドキャストの詳細を見る

We unpack how to evaluate AI that writes and creates, not just predicts. Why perplexity captures surprise, why a low perplexity score isn’t a guarantee of correctness, and how precision, recall, and the harmonic F1 balance model performance. We compare BLEU and ROUGE, explore Retrieval-Augmented Generation to stay faithful to private data, and discuss out-of-domain challenges, agentic AI, and the guardrails shaping the future.

Note: This podcast was AI-generated, and sometimes AI can make mistakes. Please double-check any critical information.