鱼眼镜头的问题我无能为力，但假设效果不是太大，以上图像之间的映射是透视变换。

我们可以变换平面上的一个点$z=1$使用 3D 空间$3\times 3$矩阵。

$$\left( \begin{array}{c} X\\ Y\\ Z\\ \end{array} \right) = \left( \begin{array}{c} s_x\ \ h_x\ \ t_x \\ h_y\ \ s_y\ \ t_y \\ p_x\ \ p_y\ \ 1 \\ \end{array} \right) \left( \begin{array}{c} x\\ y\\ 1\\ \end{array} \right)$$

• $s$正在缩放
• $h$正在剪
• $t$是翻译
• $p$是透视倾斜（正数表示正侧倾斜）

我们可以将这个物体在 3D 空间中投影回平面上$z=1$只需将坐标除以$Z$. 这将空间中的每个点映射到平面的交点$z=1$以及连接点和原点的线。这基本上是拍照的过程。

$$X_{proj} = X/Z$$ $$Y_{proj} = Y/Z$$

我们想要做的是找到将我们从投影坐标带回原始坐标的反向变换，其中点仅存在于平面中$z=1$.

事实证明，我们可以使用 4 个点（例如矩形的四个角）求解所有变换参数，并求解以下方程组（参见此处了解推导和一些示例 MATLAB 代码）。

做出某些假设，例如对象不改变大小或形状（$s_x=s_y=1$,$h_x=h_y=0$) 可以简化这些方程。

math.stackexchange 的以下链接可能对您有进一步的帮助，如果只是为了证明您并不孤单......
https://math.stackexchange.com/questions/13404/mapping-irregular-quadrilateral-to-a -长方形