1. 程式人生 > >MODNet-Motion and Appearance based Moving Object Detection Network for Autonomous Driving

MODNet-Motion and Appearance based Moving Object Detection Network for Autonomous Driving

相關連線

解決問題

獲得兩種結果,一個是區分運動前景和靜態背景的mask,另外一個是檢測所有車輛的bounding boxes,並且區分

主要貢獻

  • MODNet

一個雙流的多工學習框架,兩個VGG16的編碼網路,分別提取RGB影象和稠密光流影象的特徵,然後把特徵融合(具體如何融合文章沒講)之後分別送給 FastBox網路 和 MS網路(多層轉置卷積)

  • 自創實驗資料 KITTI MOD

擴充套件KITTI中的目標檢測,在車輛的標註中新增靜止/運動的標籤,得到MOD

實驗

資料: DAVIS + KITTI MOD

對比:在mask結果上 和 MPNet進行對比

結果:

DAVIS meanIOU 63.88 (+CRF達到66)

KITTI MOD mAP 21.5% 

速度  OpticalFlow Estimation 50min/8sMODNet 0.128s(8fps) + CRF  1.15s

總結

效果渣(瓶頸)是因為沒有對應大型訓練資料庫