A Hierarchical Bayesian Language Model based on Pitman-Yor Processes
这篇论文通过把unigram上的Pitman-Yor语言模型拓展到ngram,提出了一种新的平滑方法,同时在理论和试验上证明了有效性。 大部分概率语言模型都是$n$-gram模型,利用每个单词给定的$n-1$个上文单词预测该单词,并估计整个 […]
文章来源:
Author:hankcs
link:http://www.hankcs.com/nlp/hpylm.html
下一篇:简单有效的多标准中文分词
上一篇:Wu Manber多模式匹配算法