两个回归系数之比的无偏估计?

机器算法验证 回归 回归系数 无偏估计器 比率
2022-01-30 06:21:09

假设您拟合线性/逻辑回归g(y)=a0+a1x1+a2x2, 目的是无偏估计a1a2. 你非常有信心a1a2在他们的估计中,相对于噪声是非常积极的。

如果你有联合协方差a1,a2,您可以计算或至少模拟答案。有没有更好的方法,在有大量数据的现实问题中,你会遇到多少麻烦来获取估计的比率,或者采取半步并假设系数是独立的?

1个回答

我建议对变量类型进行错误传播并最小化错误或相对错误a1a2. 例如,来自Strategies for Variance EstimationWikipedia

f=AB
σf2f2[(σAA)2+(σBB)22σABAB]

σf|f|(σAA)2+(σBB)22σABAB

作为猜测,您可能希望最小化(σff)2. 重要的是要了解,当人们进行回归以找到最佳参数目标时,人们已经放弃了拟合优度。拟合过程会找到最佳的AB,这绝对与最小化残差无关。这之前已经通过对非线性拟合方程取对数来完成,对于该方程,多重线性应用了不同的参数目标和Tikhonov 正则化

这个故事的寓意是,除非人们要求数据产生一个人想要的答案,否则人们不会得到那个答案。而且,没有将所需答案指定为最小化目标的回归将不会回答问题。