• 用于毫米波雷达的GNN:Radar-PointGNN


    在这里插入图片描述

    • 文章提出了一种基于GNN与毫米波数据的3D目标检测方法,算法流程如上图所示,符合基本的GNN流程

    论文地址:https://ieeexplore.ieee.org/document/9455172
    关于GNN的一些基本文章,可以参看以下链接:

    1. 从CNN到GNN:https://zhuanlan.zhihu.com/p/463666907
    2. GNN入门代码案例:基于分子结构预测物质可溶性https://zhuanlan.zhihu.com/p/504978470

    论文摘要

    在传统的Lidar检测领域,检测方法的范式已经趋向成熟,如今的GNN兴起打开了一扇新的大门,对于毫米波数据,由于其局部的关联性强,带有明确的空间位置关系,并且数据稀疏,作者提出了一种基于GNN的毫米波雷达检测方法。
    主要的创新点就是:

    1. 首次实现了GNN在Radar上的实现
    2. 在nuscenes的radar detection task榜单实现sota结果

    实现细节

    在这里插入图片描述
    如上图所示,作者将模型分为三个阶段,分别是:雷达原始特征到高维向量(non-contexual embeddings)的映射,图生成(generate contexual-embeddings),预测(decoder),下面分别介绍:

    预处理阶段,完成原始特征映射

    1. 基本定义

    在这里插入图片描述
    其中,引入T=(0,1…N)帧的雷达信息增加点云密度, σ i \sigma_i σi为雷达点云的RCS(可以认为点云投射目标的反射强度), u i u_i ui代表点云在统一坐标系的坐标(x,y),deg( v i v_i vi)代表点云所连接的边数量(两点距离小于r则认为两点相连,论文中r=1m,如下图所示)。
    在这里插入图片描述
    2. 特征映射
    在这里插入图片描述
    构成:MLP (4, 32, 64, 128, 512)

    生成(generate contexual-embeddings)

    在这里插入图片描述

    • 首先, 边的特征通过计算其所连接的两个点和上次的embedding m j m_j mj
    • 其次,节点的特征依次通过:
      • 聚合所有连接的边(max-pool)的特征
      • 结合上次embedding的节点特征
      • 送入映射函数和激活函数
      • 引入残差连接,生成最后的i节点的embedding向量(contexual-embeddings)

    至此,节点和边的更新方式已经定义

    预测(decoder)

    预测内容

    在这里插入图片描述
    其中, h c l a s s h_class hclass代表当前预测类别已经预先定义好的值 H e i g h t / 2 Height/2 Height/2,也就是每类的预定义高度, σ h \sigma_h σh为预测的偏移值,同理,对于 x ^ \hat{x} x^,是每个点的真实值加上月的偏移值。

    损失定义

    在这里插入图片描述

    • 类别损失把点云作为base unit进行损失计算

    • 回归把预测结果作为损失base unit计算

    后处理

    由于雷达数据稀疏,其预测结果也较为稀疏,但是很多物体上点云投影较多会造成重复预测,因此作者将 T n m s T_nms Tnms设置为0.1,避免重复预测,下面是后处理流程

    在这里插入图片描述

    结果

    在这里插入图片描述
    在这里插入图片描述

  • 相关阅读:
    企业信息化整体解决方案
    H2.64和H2.65编码区别
    C++模板初阶
    Java类的生命周期和子类实例化对象的过程
    《工程伦理》1-13章汇总
    List集合的Stream流式操作实现数据类型转换
    私有化部署 给数据安全加把“锁”!
    剑指offer 16 数值的整数次方
    JavaScript——JS事件
    uniapp打包安卓后在安卓屏上实现开机自启动
  • 原文地址:https://blog.csdn.net/weixin_43253464/article/details/126150439