为什么logit模型中对数似然函数的Hessian不是负*半*定?

机器算法验证 罗吉特 黑森州
2022-04-04 05:17:11

对数似然函数的 Hessian 是

2ln(βx)ββ=i=1nΛ(βxi)(0,1)[1Λ(βxi)](0,1)xixi0

在这里,我用下括号标记了我对不同因子范围的理解。如果所有 , Hessian 将为零因此,我会得出结论,Hessian 是负半定的xi=0i

然而在Greene (p. 691-692)中——它像我一样指定了 Hessian ——它说

请注意,Hessian 总是负定的,因此对数似然是全局凹的。

我在这里想念什么?

1个回答

当他们说 Hessian 总是负定的时,他们假设是一个满秩矩阵,这是回归模型的一个非常典型的假设。X

因此,在您的示例中,Hessian 不会是负定的。但是,他们假设您拥有信息丰富的数据:如果您不观察 x 的不同水平,的影响。xx