• ORB-SLAM2 ---- Tracking::TrackReferenceKeyFrame函数


    目录

    1.函数作用

    2.步骤

    3.code

    4.函数解析

    4.1  将当前帧的描述子转化为BoW向量

    4.2 总体解释


    1.函数作用

            用参考关键帧的地图点来对当前普通帧进行跟踪。

    2.步骤

    Step 1:将当前普通帧的描述子转化为BoW向量
    Step 2:通过词袋BoW加速当前帧与参考帧之间的特征点匹配
    Step 3: 将上一帧的位姿态作为当前帧位姿的初始值
    Step 4: 通过优化3D-2D的重投影误差来获得位姿
    Step 5:剔除优化后的匹配点中的外点
     @return 如果匹配数超10,返回true

    3.code

    1. /*
    2. * @brief 用参考关键帧的地图点来对当前普通帧进行跟踪
    3. *
    4. * Step 1:将当前普通帧的描述子转化为BoW向量
    5. * Step 2:通过词袋BoW加速当前帧与参考帧之间的特征点匹配
    6. * Step 3: 将上一帧的位姿态作为当前帧位姿的初始值
    7. * Step 4: 通过优化3D-2D的重投影误差来获得位姿
    8. * Step 5:剔除优化后的匹配点中的外点
    9. * @return 如果匹配数超10,返回true
    10. *
    11. */
    12. bool Tracking::TrackReferenceKeyFrame()
    13. {
    14. // 特征点都是有一个描述子 ORB词典(描述子集) 特征点的描述子 树根.....汉明距离最小的 ORB词典的树根 nodeid
    15. //构造BOw向量 Bowvector pair FeatureVector图像的特征点索引 >
    16. // Step 1:将当前帧的描述子转化为BoW向量 BowVector FeatureeVector
    17. mCurrentFrame.ComputeBoW();
    18. // We perform first an ORB matching with the reference keyframe
    19. // If enough matches are found we setup a PnP solver
    20. ORBmatcher matcher(0.7,true);
    21. vector vpMapPointMatches;
    22. // Step 2:通过词袋BoW加速当前帧与参考帧之间的特征点匹配
    23. int nmatches = matcher.SearchByBoW(
    24. mpReferenceKF, //参考关键帧
    25. mCurrentFrame, //当前帧
    26. vpMapPointMatches); //存储匹配关系
    27. // 匹配数目小于15,认为跟踪失败
    28. if(nmatches<15)
    29. return false;
    30. // Step 3:将上一帧的位姿态作为当前帧位姿的初始值
    31. mCurrentFrame.mvpMapPoints = vpMapPointMatches; //mvpMapPoints存储着是匹配关系:每个特征点对应的MapPoint.如果特征点没有对应的地图点,那么将存储一个空指针
    32. mCurrentFrame.SetPose(mLastFrame.mTcw); // 用上一次的Tcw设置初值,在PoseOptimization可以收敛快一些
    33. // Step 4:通过优化3D-2D的重投影误差来获得位姿
    34. Optimizer::PoseOptimization(&mCurrentFrame);
    35. // Discard outliers
    36. // Step 5:剔除优化后的匹配点中的外点
    37. //之所以在优化之后才剔除外点,是因为在优化的过程中就有了对这些外点的标记
    38. int nmatchesMap = 0;
    39. for(int i =0; i
    40. {
    41. if(mCurrentFrame.mvpMapPoints[i])
    42. {
    43. //如果对应到的某个特征点是外点
    44. if(mCurrentFrame.mvbOutlier[i])
    45. {
    46. //清除它在当前帧中存在过的痕迹
    47. MapPoint* pMP = mCurrentFrame.mvpMapPoints[i];
    48. mCurrentFrame.mvpMapPoints[i]=static_cast(NULL);
    49. mCurrentFrame.mvbOutlier[i]=false;
    50. pMP->mbTrackInView = false;
    51. pMP->mnLastFrameSeen = mCurrentFrame.mnId;
    52. nmatches--;
    53. }
    54. else if(mCurrentFrame.mvpMapPoints[i]->Observations()>0)
    55. //匹配的内点计数++
    56. nmatchesMap++;
    57. }
    58. }
    59. // 跟踪成功的数目超过10才认为跟踪成功,否则跟踪失败
    60. return nmatchesMap>=10;
    61. }

    4.函数解析

    4.1  将当前帧的描述子转化为BoW向量

    ComputeBoW函数解析icon-default.png?t=M85Bhttps://blog.csdn.net/qq_41694024/article/details/128007040?csdn_share_tail=%7B%22type%22%3A%22blog%22%2C%22rType%22%3A%22article%22%2C%22rId%22%3A%22128007040%22%2C%22source%22%3A%22qq_41694024%22%7D

    4.2 总体解释

            我们先通过词袋BoW加速当前帧与参考帧之间的特征点匹配,如果匹配数目小于15,认为跟踪失败(因为匹配数目太小影响位姿恢复结果),将上一帧的位姿态作为当前帧位姿的初始值,然后通过优化得到这帧的位姿。随后剔除优化后的匹配点中的外点。如果追踪成功的数目大于10则认为跟踪成功!

  • 相关阅读:
    千帆竞发-Redis分布式锁
    CompletableFuture理解与应用
    shadow bias之为啥有acne
    竞赛选题 基于深度学习的目标检测算法
    Mapping 设计指南
    SQL Server 2012下载和安装配置详细教程手册
    接口测试自动化测试的总结与思考,超详细的~
    Linux环境搭建与访问
    vite+vue3+ts项目集成vue-router、axios封装、sass、element-plus及icon(新增在线预览地址)
    【计算机组成原理】海明校验码
  • 原文地址:https://blog.csdn.net/qq_41694024/article/details/126467663