日本无码免费高清在线|成人日本在线观看高清|A级片免费视频操逼欧美|全裸美女搞黄色大片网站|免费成人a片视频|久久无码福利成人激情久久|国产视频一二国产在线v|av女主播在线观看|五月激情影音先锋|亚洲一区天堂av

  • 手機站
  • 小程序

    汽車測試網

  • 公眾號
    • 汽車測試網

    • 在線課堂

    • 電車測試

首頁 > 汽車技術 > 正文

毫米波雷達在多模態(tài)視覺任務上的近期工作及簡析

2022-09-28 23:40:29·  來源:自動駕駛之心  
 
三、Segmentation

3.1 多模態(tài)融合的map分割

  • 題目:A Simple baseline for BEV Perception Without LiDAR(2022, MIT)

作者的出發(fā)點: 在BEV上通過BEVFORMER的方式"無參數化"地完成Lift操作(將圖像特征轉換到BEV空間),融合雷達點云特征圖,用于分割任務,性能超越了之前的分割模型。

  1. 網絡結構:

圖片


  • 論文如其名,網絡結構比較簡單,可以看出很多論文的影子(例如BEVFORMER),作者就是通過顯式的BEV-Queries采樣圖像特征,并且concate雷達特征并通過卷積進行模態(tài)對齊與融合,后面用于分割任務。

  1. 總結分析:

  • 雷達信息處理:

圖片

雷達feature-map構成:0\1的occupy map,nuscenes提供的所有特征(RCS,X,Y,Z,V...)作為輸入concate到一起作為輸入特征。檢測范圍是[-100, 100m],網格的大小是200x200。

  • 性能提升

圖片


  • 和主流的工作相比,作者的確在分割上提升非常大,作者將這歸功于毫米波的功勞,

  • 消融實驗

圖片

總結為三點:對于分割任務,輸入過多的屬性提升不明顯(occupy only已經達到53),對multi-path的毫米波雷達點濾除反而導致性能下降(意料之中,因為multi-path的毫米波雖然會導致噪聲,但是其掃描到的物體可能正是位于被遮擋的區(qū)域),增加sweeps的數量性能也會提升(畢竟點云密度大了)。

四、密集點云生成

4.1 GAN

4.1.1 通過密集點云監(jiān)督radar生成密集點云

See Through Smoke: Robust Indoor Mapping with Low-cost mmWave Radar (2020, 斯坦福)

圖片


4.2 Lidar Supervision

4.2.1 激光雷達點云監(jiān)督毫米波生成occupy grid map

Radar Occupancy Prediction With Lidar Supervision While Preserving Long-Range Sensing and Penetrating Capabilities作者的出發(fā)點: 通過lidar這種數據質量較高的模態(tài),監(jiān)督毫米波雷達生成質量較高的占據柵格地圖,解決在這個過程中的兩個問題:一解決occupy網格生成存在于傳感器之間的內生性問題:傳感器感知距離不一,傳感器穿透性不一問題;二解決長距離網格生成問題;生成的occpy grid map可用于下游的路徑規(guī)劃等問題。

  1. 本文一些基本定義:

  • 極坐標系與笛卡爾坐標轉化

    作者以笛卡爾坐標系的x,y中心為極坐標系的中心,笛卡爾坐標系的一周等同于極坐標系的一段(如下圖所示的藍色紅色對應關系)

圖片


  • 作者將radar中l(wèi)idar的感知區(qū)域定位trainning-region,將其他范圍內的毫米波點云作為inference的輸入,如下圖所示

圖片


  • 毫米波雷達噪聲來源:

    multipath reflection(多路徑感染,在交通道路環(huán)境下工作的雷達越來越密集,其間產生的多徑干擾會導致雷達出現虛假目標), speckle noise, receiver saturation, and ring-shaped noise

    關于以上噪聲的成因:https://zhuanlan.zhihu.com/p/407095772

  • 本文各類顏色含義

圖片

分享到:
 
反對 0 舉報 0 收藏 0 評論 0
滬ICP備11026917號-25