sponsored links

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

周彥武

馬斯克的特斯拉上沒有用鐳射雷達,不過馬斯克的龍飛船用了,鐳射雷達實際與傳統的CMOS攝像頭沒有本質區別,二者最大區別是傳統的CMOS攝像頭是2D,鐳射雷達是3D的,特別是Flash鐳射雷達,其最初名字就叫3D相機,它還有一個名字,就是ToF相機。龍飛船上用的就是Flash鐳射雷達。

Flash鐳射雷達最早追溯至1987年,美國NASA為登陸太陽系其他行星設計的感知系統,由NASA資助的ASC公司負責,2006年NASA設立自動著陸有害障礙物躲避技術即ALHAT專案,2010年專案透過驗收,2009年ASC公司的3D相機搭載於奮進號太空梭上併成功發射,2012年後搭載於龍飛船上,2016年首次龍飛船首次發射成功,沒錯,就是特斯拉CEO馬斯克的龍飛船。ASC為龍飛船製作的3D相機名為DragonEye,2016年美國的OSIRIX-REX專案,即 Origins Spectral Interpretation Resource Identification SecurityRegolith Explorer(OSIRIS-REx),這個專案是發射一個航天器採集小行星樣本返回任務,使用的著陸艙命名為Tiger,ASC為其製作了3D相機,命名為TigerEye。

ASC稱之為FLC,即Flash Lidar Camera

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

TigerEye使用128*128的陣列,有效距離5釐米到1.1公里。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

2010年,ASC在IEEE上發表論文,ASC's 3D Flash LIDAR Camera: The Sciencebehind ASC's 3D Depth Imaging Video Camera,網址:https://ieeexplore.ieee.org/document/7268968。

奮進號的3D鐳射雷達相機

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

ASC的Flash鐳射雷達相機用在美軍的武裝直升機上,因為波長是1570奈米,可穿透濃霧及沙塵,上圖就是其沙漠試驗,美軍研發的無人直升機的關鍵元件就是Flash鐳射雷達相機,它將為無人直升機提供精準的3D影象做導航。

TigerEye是不折不扣的Flash鐳射雷達,與長城汽車上用的IBEO的鐳射雷達原理上沒有區別,就連畫素數也很接近,不過ASC是在2008年就做出來了,當然ASC的TigerEye價格很高,約45萬美元,畢竟這相機要用在龍飛船上,太空環境是很惡劣的。據說ASC大約賣出了100套TigerEye,主要用於太空和軍事領域,由於這個市場太小了,ASC在2016年出售給了德國大陸汽車公司,為其開發車載的Flash鐳射雷達或者說車載的3D相機,ASC仍然提供太空級3D相機,有效距離目前可達6公里。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

Flash鐳射雷達與傳統CMOS相機非常相似,只不過它是發射鐳射,而傳統CMOS相機是接收自然光的反射。Flash鐳射雷達的發射通常是VCSEL,接收是SPAD陣列,VCSEL它是可定址的陣列模式,易與SPAD陣列對應。

索尼在2021年9月6日,推出車規級鐳射雷達用SPAD感測器IMX459,最大探測距離300米,在300米處的距離精度仍有15釐米,IMX459有10萬畫素,而安森美的樣品目前只有4萬,ASM的只有1萬,目前國產長城汽車即將使用的IBEO的真固態鐳射雷達,其SPAD就是ASM的,畫素為10240。

10萬畫素顯然太低了,佳能於2021年12月初推出了320萬畫素的SPAD感測器,並預計2022年下半年量產。320萬畫素通常解析度是2048*1560,也就是等效於傳統360度旋轉式鐳射雷達的1560線。這樣的解析度和傳統相機已沒有區別。佳能在2021年初宣佈的100萬畫素SPAD感測器擁有每秒24000幀的超高幀率,目前360度旋轉鐳射雷達幀率僅為10FPS,佳能是其2400倍,是傳統攝像頭的800倍。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

佳能的320萬畫素SPAD感測器,尺寸為13.2毫米長,9.9毫米寬,在佳能川崎晶圓廠製造。不僅佳能,松下,三星和索尼都在此領域花費大量精力研發,目前佳能遙遙領先,奧地利AMS、松下、索尼和三星處於第二梯隊,第三梯隊還有東芝、豐田(電裝)、安森美、濱松、英飛凌、意法半導體、富士膠捲。第四梯隊則有蘋果、博通、Lumentum。

佳能的320萬畫素SPAD感測器可以直接取代傳統的CMOS影象感測器,加上VCSEL,就是鐳射雷達,1500線的鐳射雷達,並且體積和成本與現有的CMOS影象感測器相差不大,這樣的鐳射雷達看起來就是個攝像頭。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

CMOS影象感測器與SPAD影象感測器對比,CMOS影象感測器內部多了兩級處理,自然光照射畫素陣列,發生光電效應,在畫素單元內產生相應的電荷。當電容充滿電荷之後,光子的射入會導致內部激發出新的電子空穴對,與原來充電形成的電子空穴對進行配對放電,形成光電流,光電流給右側的電容充電變成一個電壓輸出,為提高信噪比,對模擬訊號進行放大,然後進入ADC變換電路,再以數字形式輸出,噪音會在模擬訊號放大階段和ADC變換階段產生,同時模擬訊號放大器有線性範圍,也就是CMOS影象感測器有個動態範圍。而SPAD不會有噪音,它是直接光子計數,從頭到尾都是數字訊號,未有任何噪音。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

CMOS影象感測器的光電轉換效率很低,約為SPAD的百萬分之一。所以SPAD特別適合低照度場合。CMOS加大感光面積也可以用於低照度場合,但成本也會飛漲。

目前城市裡光汙染嚴重,肉眼可看到的星星極限大約為四等亮星,這種情況下的環境照度大約0.01Lux,大城市裡即使再黑暗,基本都有0.01lux的照度,SPAD可輕易做到0.002Lux,也就是說任何城市環境,無論多暗,SPAD都能正常工作,這也是佳能的SPAD影象感測器目前還是主打監控的原因,SPAD相機可以取代NIR近紅外相機,它擁有近紅外相機的全部能力,卻沒有近紅外相機的缺點。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

SPAD超高的光電效率也讓其幀率可以超高,SPAD的時間精度可達100皮秒,可以做超高速相機,理論幀率可輕易做到每秒10萬幀。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

佳能的SPAD不同於傳統SPAD,開口率達到100%,因此可以做到超高畫素。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

SPAD另一個益處是讓點雲處理下崗,因其可以直接輸出影象,無需任何後端處理,SPAD就是個3D相機。SPAD有兩種輸出,一是光子計數器,二是飛行時間。SPAD因具備高靈敏度,可以檢測到單一個光子,因此可做成光子計數器,光子計數器可以直接轉換為強度影象,原理類似普通的數碼相機,傳統數碼相機上的PIN二極體檢測到自然光反射後的光線,光電變換將光強變為電流訊號,TIA放大器將電流訊號轉換為電壓訊號,電壓訊號再經ADC處理,最終生成影象。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

典型SPAD D-ToF系統,這裡只看飛行時間,SPAD陣列的每個Cell利用啟動截至時間可以輕易得到飛行時間。再加上TDC電路就可以輸出深度影象了。

TDC的原理這裡不再贅述,簡單說就是將離散的時間資料轉換為直方圖,再轉換為數字影象。因為要檢測每個畫素的開關,因此最佳的做法將TDC電路與畫素整合在晶片上。目前多用兩段式TDC法,單段TDC佔的面積過大,會導致成本大增。

馬斯克已用鐳射雷達10年了,鐳射雷達與相機將合二為一

圖片來源:網際網路

一種典型的整合TDC的SPAD陣列,傳統鐳射雷達需要單獨加一片TDC晶片來處理,集成了TDC的SPAD自然不需要,直接可以輸出深度影象。當然整合TDC的工藝不太好掌握,成本也略高,因此有些SPAD廠家依然選擇外接TDC,不過這樣精度有所降低,功耗自然也有增加。

更多佐思報告

佐思 2021年研究報告撰寫計劃

智慧網聯汽車產業鏈全景圖(2021年12月版)


主機廠自動駕駛


汽車視覺(上)


高精度地圖


商用車自動駕駛


汽車視覺(下)


高精度定位


低速自動駕駛


汽車模擬(上)


OEM資訊保安


ADAS與自動駕駛Tier1


汽車模擬(下)


汽車閘道器


汽車與域控制器


毫米波雷達


APA與AVP


域控制器排名分析


車用鐳射雷達


駕駛員監測


鐳射和毫米波雷達排名


車用超聲波雷達


紅外夜視


E/E架構


Radar拆解


車載語音


汽車分時租賃


充電基礎設施


人機互動


共享出行及自動駕駛


汽車電機控制器


L4自動駕駛


EV熱管理系統


混合動力報告


L2自動駕駛


汽車功率電子


汽車PCB研究


燃料電池


無線通訊模組


汽車IGBT


汽車OS研究


汽車5G


汽車線束


線控底盤


合資品牌車聯網


V2X和車路協同


轉向系統


自主品牌車聯網


路側智慧感知


模組化報告


自主品牌ADAS研究


商用車車聯網


商用車ADAS


汽車多模態互動


汽車智慧座艙


車載顯示


Tier1智慧座艙(上)


座艙多屏與聯屏


智慧後視鏡


Tier1智慧座艙(下)


智慧座艙設計


汽車照明


座艙SOC


汽車VCU研究


汽車座椅


汽車數字鑰匙


TSP廠商及產品


HUD行業研究


汽車雲服務平臺


OTA研究


汽車MCU研究


AUTOSAR研究


智慧停車研究


感測器晶片


軟體定義汽車


Waymo智慧網聯佈局


ADAS/AD主控晶片


T-Box市場研究


自動駕駛法規


ADAS資料年報


T-Box排名分析


智慧網聯和自動駕駛基地


汽車鎂合金壓鑄


乘用車攝像頭季報


智慧汽車個性化


飛行汽車


專用車自動駕駛


農機自動駕駛


礦山自動駕駛


港口自動駕駛


自動駕駛重卡


無人接駁車


儀表和中控顯示


車載DMS


合資品牌ADAS


800V高壓平臺

「佐思研究月報」

ADAS/智慧汽車月報 | 汽車座艙電子月報 | 汽車視覺和汽車雷達月報 | 電池、電機、電控月報 | 車載資訊系統月報 | 乘用車ACC資料月報 | 前視資料月報 | HUD月報 | AEB月報 | APA資料月報 | LKS資料月報 | 前雷達資料月報

分類: 健身
時間: 2022-01-11

相關文章

拒絕他人的3重境界,早點教會孩子,別讓他也做“老實人”

拒絕他人的3重境界,早點教會孩子,別讓他也做“老實人”
"不懂拒絕"是"老實人"的一個基本特徵. 不會拒絕別人的不合理要求,常常讓一個人陷入一種諸事纏身卻又得不到感激的尷尬境地. 有時候,這更像是一個死迴圈,你越是不 ...

怎樣「騎車」才有鍛鍊效果?運動專家:要達到這個呼吸狀態

怎樣「騎車」才有鍛鍊效果?運動專家:要達到這個呼吸狀態
越來越多的人喜歡在戶外騎車,不僅能鍛鍊心肺.肌肉.身體協調性和平衡性,還能預防大腦老化,提高神經系統敏捷性.但怎樣的騎行才是一次"有效"騎行? 9月17日是世界騎行日,採訪專家,列 ...

五大類跑步訓練提升你的速度、耐力、爆發力

五大類跑步訓練提升你的速度、耐力、爆發力
一般跑者如果沒上跑步課程或吃課表,自己練跑通常不會像訓練肌力一樣詳細規劃,只粗抓今天跑幾公里.幾分鐘,最多加上一些衝刺就結束這回合.但當你有了訓練目標,練跑就該更有條不紊.本文根據田徑教練Gena B ...

具備20個引體向上能力後再想快速提升,這種訓練方法您試過嗎?

具備20個引體向上能力後再想快速提升,這種訓練方法您試過嗎?
引體向上到了一定的瓶頸,數量突破不了,或者說進步得很慢,特別是一些能拉20個以上.水平比較高的健友,甚至大半年只能提升一.二個,這個時候想要提升就要改變一下引體向上的訓練方法,或者改善一些細節,比如改 ...

太極拳入門與進階之第八階段 以神意行拳

太極拳入門與進階之第八階段 以神意行拳
本文系阿福原創,如轉載或引用請註明:"作者:阿福太極.(微信公眾號:阿福太極)".以免被追究法律責任. 太極拳入門與進階的一個基礎+八個階段,今天終於進入到最後一個階段了.拖了很長 ...

終於體會到文詠珊的美了,就算與南韓顏值女星同框,也美得很驚豔

終於體會到文詠珊的美了,就算與南韓顏值女星同框,也美得很驚豔
哈嘍,大家好,我是biu時尚,很高興又和大家分享明星時尚與搭配技巧!希望我的文章讓你對時尚更加的感興趣,讓本身就好看的你,更加的有魅力! 永遠十八,永遠年輕是每一個女孩子的夢想和願望,但是這個願望僅僅 ...

從X到13,蘋果手機都進行了哪些提升和改變

從X到13,蘋果手機都進行了哪些提升和改變
隨著2021年9月蘋果凌晨釋出會的結束,新一波果粉買買買熱潮或許會來的更兇猛一些.曾經深度體驗過iPhone X(2017年9月13日釋出),轉眼間已經進行了3波升級換代.作為安卓黨手機常用者,來聊聊 ...

遠征星辰大海,不能或缺的舒曼波

遠征星辰大海,不能或缺的舒曼波
1952年德國物理學家舒曼(W.O.Schumann)指出,地球和電離層可以構成一個諧振腔體,腔體中存在一個特殊的諧振頻率,這個諧振頻率被稱為舒曼共振.舒曼波是在地球的電磁波譜中震盪的磁場頻率.舒曼波 ...

兩方案出爐,獨行俠欲再升級!或1換1送走波神,2換1再追20+4妖衛

兩方案出爐,獨行俠欲再升級!或1換1送走波神,2換1再追20+4妖衛
儘管隨著休賽期市場的推進,各支球隊之間的搶人大戰和軍備大賽,已經逐漸接近尾聲,但對於上賽季再次折戟首輪的達拉斯獨行俠隊來說,球隊管理層在休賽期提升陣容實力方面的工作,顯然還未完全結束! 而從目前的情況 ...

號稱雲南的小紐西蘭,小眾露營地——麼波衝

號稱雲南的小紐西蘭,小眾露營地——麼波衝
麼波衝位於玉溪市華寧縣縣城東北35公里的通紅甸鄉所梅早村委會,儘管道路不是那麼好走,山路崎嶇,不時有點泥路,卻是徒步露營愛好者的天地,前往麼波衝路上美景足以讓人心醉. 到達麼波衝,零零星星有幾家農莊, ...

奧運往事 | 中國奧運代表團首位新疆選手曾波:摔掉11顆牙堅持完賽

奧運往事 | 中國奧運代表團首位新疆選手曾波:摔掉11顆牙堅持完賽
1984年,石河子青年曾波騎著單車和中國腳踏車隊的隊友們一起飛馳在洛杉磯的海邊公路.他沒想到會摔車,更沒想到會撞掉11顆牙,嘴裡縫了好幾針.住了兩天院之後,這個傳承著兵團人剛毅頑強精神的少年,在一片令 ...

賓士GLK300音響改裝勁浪兩分頻,發燒改裝提升聽音快感

賓士GLK300音響改裝勁浪兩分頻,發燒改裝提升聽音快感
對自己的愛車根據自己的愛好進行改裝,體會的不僅是好器材帶來的享受,更可以體會每一次升級後那種感受到明顯變化的樂趣.本次主角賓士GLK300車主來到泉州海林,就是為了感受改裝帶來提升的快感. 改裝車型- ...

智慧化表現亮眼,動力提升明顯,苦等多年的全新奇駿值得嗎?

智慧化表現亮眼,動力提升明顯,苦等多年的全新奇駿值得嗎?
提到奇駿,相信很多人認為它就是一款合格的家用SUV.穩定的三大件.較低的油耗.較高的舒適性都是它鮮明的標籤,它的特點都緊緊圍繞著"家用"二字展開!這樣的奇駿也確實收穫了不錯的銷量, ...

胡堅波丨城市大腦的未來形態

胡堅波丨城市大腦的未來形態
當前,新一輪科技革命和產業變革方興未艾,數字化正以不可逆轉之勢深刻改變人類生產生活方式.作為新基建的重要內容,城市大腦不僅僅是技術創新,更是社會創新,揭示了城市未來的發展模式,也預示著城市文明新階段的 ...

宋朝十大詞人,一人一首傳世宋詞,讓你提升一個境界

宋朝十大詞人,一人一首傳世宋詞,讓你提升一個境界
宋詞以奼紫嫣紅.千姿百態的風貌神情,與唐詩爭奇,與元曲鬥妍,歷來與唐詩並稱雙絕,都代表一代文學之勝. 在古代文學的閬苑裡,它是一塊芬芳絢麗的園圃. 那些令人心曠神怡的詞句,讀來唇齒噙香,猶如置身千年前 ...

再添新援!叫板詹姆斯之人馳援達拉斯,“東東波”恐成最後絕唱

再添新援!叫板詹姆斯之人馳援達拉斯,“東東波”恐成最後絕唱
經過了漫長的等待,尼利基納在自由球員市場上終於等到了自己的新東家.達拉斯獨行俠與其簽下了一份兩年的底薪合同,第二年為球隊選項.對於尼利基納來講,這是他想要繼續留在NBA的最好機會,而加盟重組後的達拉斯 ...

阿爾法腦波是什麼?他又有什麼作用呢?

阿爾法腦波是什麼?他又有什麼作用呢?
阿爾法腦波介紹 阿爾法腦波是四種基本腦波之一.振盪平均為10次/秒.在腦波中阿爾法腦波是第一個被發現的.1908年奧地利醫學家漢斯·伯格博士第一個提出發現,並稱之為阿爾法波(ALPHA),因為在希臘字 ...

江波龍 FORESEE XP1000 1TB SSD 體驗:主流效能,超低發熱

江波龍 FORESEE XP1000 1TB SSD 體驗:主流效能,超低發熱
今年的筆記本有一個非常普遍的趨勢,就是輕薄化.輕薄本自不必說,就算是遊戲本,也普遍變得更便攜了,這當然是好事,但這也意味著我們玩家擴容的成本變得更高了.就拿我的拯救者 R9000P 來說吧,2.5 寸 ...

善用城市大腦提升決策理性
城市大腦的建設可以借鑑試點城市的成功經驗,但不能簡單地"複製-貼上" 城市作為城市居民的主要生活空間,良好的公共服務和較高的城市治理水平至關重要.近年來,人工智慧.雲計算等數字技術 ...

怎麼提升GRE單詞記憶效率?參考這些方法快速提升

怎麼提升GRE單詞記憶效率?參考這些方法快速提升
對於正在備考GRE的同學來說,在正式備考前還是需要打好基礎才行的,背GRE詞彙就是很有必要的打基礎了.不過也不能在背單詞上浪費很多時間,就需要考生們能夠高效地去記憶GRE詞彙,那麼如何才能更加高效的提 ...