2020 年 7 月,日本科學技術振興機構 JST 下屬戰(zhàn)略創(chuàng)造研究推進事業(yè)小組 Core Research for Evolutional Science and Technology (CREST)聯(lián)合日本 Open Innovation Platform with Enterprises, Research Institute andAcademia(簡稱 OPERA)從市面上直接采購了 10 款 4 個品牌的激光雷達做了對比測試。
這 10 款激光雷達中,Velodyne 的有 5 款,國產(chǎn)禾賽的兩款,Ouster 的兩款,速騰的一款。
第一輪評測對比的是激光雷達感知性能,分 5 個小選項,分別是二次反射 Sec.Reflections、強度偏差 Int.Aberrations、光暈 Blooming、丟失點 MissingPoints、交通標識視覺化 LineVisibility。
?
激光反射不止一次,合理利用能夠增加點云密度,但有時強反射目標的二次反射會形成虛像,或許可以通過算法過濾重復點,但最好不要出現(xiàn)。10 款激光雷達中只有 VLP-32C 和 OS1-16 有二次反射虛像,合理利用多次反射也有可取之處,如已過車規(guī)的法雷奧 SCALA 就是三次反射回波。
強度偏差使反射強度值過大的目標可能導致噪音,激光雷達為增加探測距離和信噪比,就要增加功率密度,就容易出現(xiàn)這種噪音。10 款激光雷達中,128 線的 VLS-128 出現(xiàn)在 25 米內(nèi),HDL-64、OS1-64、OS1-16 應該是整個可測量范圍內(nèi)都會出現(xiàn)。
光暈類似于陽光強烈時產(chǎn)生的五顏六色的光暈圈,或者像我們用手按壓液晶出現(xiàn)的色變,Ouster 的兩款激光雷達都很明顯。
丟失點的原因是有些弱反射目標或小反射面積被忽略了,Ouster 的同樣很糟糕。
最后是交通標識視覺化識別,主要是車道線,車道線漆面材質(zhì)與路面差別明顯,激光雷達上會有明顯反映,路沿和路上的諸如“stop”的字符也是如此,這種物理方式的識別可靠性遠高于視覺算法,同時不受光線和淺積水積雪影響。路沿是高度有明顯變化,激光雷達能夠識別出高度變化。順便說一句,路沿檢測識別立體雙目做得更好。?交通標識視覺化分非常好、好、可接受、差、非常差 5 個級別,VLS-128 明顯勝出,畢竟它最貴,線束最密集,分辨率最高。禾賽的兩款有扭曲失真,但還可以接受。Velodyne 最低端的 VLP-16 表現(xiàn)也不錯。
接下來是測量距離精度對比,這里引入 RMSE 均方根誤差概念,又稱中誤差,衡量觀測精度的一種數(shù)字標準。亦稱“標準誤差”或“均方根差”。在相同觀測條件下的一組真誤差平方中數(shù)的平方根。因真誤差不易求得,所以通常用最小二乘法求得的觀測值改正數(shù)來代替真誤差。它是觀測值與真值偏差的平方和觀測次數(shù) n 比值的平方根,在實際測量中,觀測次數(shù) n 總是有限的,真值只能用最可信賴(最佳)值來代替。?近距離情況下,Ouster 和 Velodyne 的誤差比較大,特別是 Velodyne 老 64 線激光雷達,這也是現(xiàn)在幾乎沒人用的原因,而禾賽 64 線非常優(yōu)秀,整個測量區(qū)域內(nèi)都很優(yōu)秀,怪不得國外廠家很多在用禾賽激光雷達。有些激光雷達有效距離近,RMSE 過大,已經(jīng)不計入有效測量范圍,Ouster 表現(xiàn)很差,64 線只有 65 米,OS1-16 只有 25 米。
接下來是點云數(shù)量對比測試,Ouster 表現(xiàn)非常糟糕,64 線還不如 Velodyne 的 32 線,85-120 米連 16 線都不如,更不如禾賽的 40 線。禾賽表現(xiàn)非常優(yōu)秀,40 線幾乎接近 Velodyne 64 線的水準。
車輛點云密度,禾賽的 64 線壓倒了 Velodyne 的 64 線,相當驚人。VLP-32C 表現(xiàn)也不錯。
行人點云密度,VLS 在近距離領先,遠距離仍然不及禾賽的 64 線。
很明顯,禾賽的 40 線完全壓倒了 Ouster 的 64 線,速騰的 32 線也比 Velodyne 的 VLP-32C 要強。
衡量激光雷達反射強度分離度的指標為 symmetric KL divergence (MKL),這個值越高,證明強度分離性越好,也就可以激光雷達強度值來做點文章,比如物理方式識別車道線,利用強度成像取得灰度圖像,做高精度定位或道路標識識別。?左邊一列是白色目標與鉆石型 Diamond 目標之間的平均分離度,右邊一列是白色目標于 Velvet 目標之間的平均分離度。Ouster 還是表現(xiàn)最糟糕。40 線禾賽表現(xiàn)最好。
VLP-16 近距離表現(xiàn)最好。
禾賽毫無疑問是第一名,Ouster 需要更多努力。這也證明,我國的激光雷達絲毫不次于國外的,中國的月亮一樣圓。