大模型Perplexity困惑度定义

大模型的Perplexity（困惑度）是衡量语言模型预测下一个词准确率的指标，数值越低代表模型对语言的掌握越精准，生成的内容逻辑越连贯、意外性越小，理解这个概念,不需要你是数学博士，只需要把它想象成“猜词游戏”的得分机制，当你读一段话时，如果每个词都顺理成章，困惑度就低；如果突然冒出个让你愣住的词，困惑度就飙升……