光流和时空有啥区别

Posted 2023-02-21

【中文标题】光流和时空有啥区别

【英文标题】：what is the difference between optical flow and spatio temporal光流和时空有什么区别

【发布时间】：2016-07-27 14:58:25

【问题描述】：

我读过关于光流和时空特征的文章，发现：

我们可以从光流中得到物体的速度和方向，而我们可以从时空中得到位置和时间。

我有点困惑，有人说我们可以从光流和时空中获得相同的信息，对吗？

我只是想知道我对我们可以从这两者中得到什么是正确的，或者它们表明了相同的目标。

问候

【参考方案1】：

光流是由于图像的变化而引起的物体的表观运动。例如，在第一幅图像中，灰色点位于左侧，而在第二幅图像中则位于右侧。因此，该对象看起来向右移动。然而光流只是表面的，可能会出现两个错误：

物体具有统一的颜色，因此没有明显的运动，即使有真实的运动。 没有移动的物体，但由于照明的变化，它看起来像这样。

另一方面，你有时空信息。我不确定任何官方接受的定义，但在我看来，这只是对象在特定时间（时间）的位置（空间）的组合信息。这种组合使准确了解物体的运动成为可能。

在我看来，时空信息可以为您提供有关对象位置、速度甚至运动矢量的信息。考虑到运动是明显的，光流也是如此。因此，您几乎是正确的，您只是忘记了光流是明显的这一事实。当然，如果你只是隐含地假设，那么我同意你的解释。

编辑：为了更清楚，如下图。这两张不同的图片表明了一种光流，一种表观运动。立方体似乎在转动。从光流来看，尚不清楚这是否也在现实中发生。可能是相机在两张照片之间移动。然而，对于光流，我们假设表观运动是真实运动的结果。时空信息没有这种模糊性，我们的信息始终与现实有关。

来源：

Van Gool, L., Tuytelaars, T., Szekely, G. 和 Ferrari, V. (n.d.)。 模式识别和图像解释：图像处理和 图像解读。

图片：http://fzheng.me/2015/03/25/optical-flow/

【讨论】：

因此取决于这一点，光流提供的信息与我们可以从时空获得的信息相同，但您的意思是它的准确性有所不同。对吗？？？

不完全。在光流的情况下，图像可以暗示现实中不存在的东西。之所以看起来如此，是因为图片只是现实的代表。我将编辑答案以明确这一点。图片就是最好的例子。光流表明立方体正在转动，但也有可能只是因为相机正在转动而看起来如此。