众所周知,为了在OpenCV中跟踪对象,我们可以使用:
- FeatureDetector查找特征
- DescriptorMatcher用于匹配所需对象的特征与视频中当前帧的特征之间的相似性
- ,然后使用findHomography查找对象 的新位置。
对于匹配特征,DescriptorMatcher使用汉明距离(相同大小的两个序列之间的差值,而不是坐标之间的距离)。
。我们找到当前帧中最相似的对象,但不是最接近前一个位置的对象(如果我们知道的话)。
我们如何使用匹配汉明距离和坐标之间的距离,例如,给定两者的权重,而不仅仅是汉明距离?
它可以解决以下问题:
-
如果我们从上一帧的位置(x,y)开始跟踪对象,并且当前帧包含两个相似的对象,那么我们将找到最相似的,但不是最接近的。但由于惯性,坐标的变化通常比相似度(物体的光线或旋转的急剧变化)慢。而我们必须找到坐标最近的相似物体
-
因此,我们找到的特征,不仅是最相似的,而且将给出最准确的单应性,因为我们排除了特征,虽然非常相似,但在坐标上非常远,很可能属于其他物体。
您需要的内容可能是:
- 照常计算匹配项。
-
DMatch
具有queryIdx
和trainIdx
指数。您可以使用它们来检索相应的关键点。计算它们之间的欧氏距离,用某种加权函数更新DMatch
的值distance
。 - 按距离排序匹配(因为
distance
已更改)。
现在匹配向量根据描述符之间的汉明距离和关键点之间的欧几里得距离进行排序。
我认为opencv中没有内置方法来做到这一点。
我要做的是使用cv::DescriptorMatcher::radiusMatch。它找到所有在一定汉明距离下的匹配。您需要找到一个半径/距离,以确保功能与您的应用程序足够相似,但不会太大而使整个计算变慢。
然后,你可以从这些特征中选择最接近你预测的特征位置的一个,或者根据汉明距离和坐标距离等计算某种加权分数