朴素贝叶斯的参数估计 - 最大后验和最大似然

机器算法验证 最大似然 朴素贝叶斯 后部 贝叶斯
2022-04-07 01:11:59

我想知道我是否正确理解了这些术语。总结一下我的想法:

在朴素贝叶斯中,我们的决策规则基本上是我们假设的最大后验(MAP)估计。我们将观察值分配给具有最大后验概率的类xxωj

argmaxj=1...,mP(ωjxx)

这被称为 MAP,因为我们正在结合先验知识(先验概率)来计算后验概率:

P(ωjxxi)=P(xxiωj)P(ωj)P(xxi)

在哪里

  • i = 1, 2, ..., n(样本)
  • j = 1, 2, ..., m(类标签)

  • ωj =j

  • xxi = 样本i

现在,如果我们使用训练数据根据训练数据中类的频率估计先验的参数,这将是最大似然估计 (MLE)。类似地,我们可以使用 MLE在条件独立假设下P(ωj)P(xxiωj)

P(xxωj)=k=1dP(xxkωj)

这有意义吗?

0个回答
没有发现任何回复~