模型评估如果训练得到一个ngram语言模型,如何衡量它对语言表达习惯约束表达的准确性呢?或者通俗来讲,如何衡量它的好坏?一般衡量一个ngram模型的好坏会在一个testcorpus测试文本中进行,指标有2个:混淆度ppl(perplexity)或交叉熵(crossentropy)。
模型评估如果训练得到一个ngram语言模型,如何衡量它对语言表达习惯约束表达的准确性呢?或者通俗来讲,如何衡量它的好坏?一般衡量一个ngram模型的好坏会在一个testcorpus测试文本中进行,指标有2个:混淆度ppl(perplexity)或交叉熵(crossentropy)。