隨著DMS即將廣泛采用,初創公司Nauto看到了一個機會,通過融合艙外和艙內攝像頭的數據,將其AI算法出售給OEM。Nauto是否真的在正確的時間推出了正確的技術呢?
許多車廠已經在多款車型上采用了ADAS,搭載多個攝像頭。同時,車廠也在搭載DMS,用攝像頭監控車內人類駕駛員的行為。
但這兩個系統從來都不是一起工作的。ADAS和DMS由不同的供應商開發,兩個系統間的數據也無法互相關聯(雖然說的不是一回事,但我總是能想起小鵬車主下跪刷臉是怎么回事……)。
加州Palo Alto的初創公司Nauto,希望改變這一情況。通過一個平臺,融合車輛外部和內部生成的數據,Nauto相信它將有助于提升道路與駕駛安全。
Nauto的創始人兼CEO Stefan Heck解釋說,“消費者反饋顯示,許多駕駛員對ADAS或DMS經常發出的誤報感到惱火。這代表行業還沒有做對這一點。”
數據融合
從2015年起,Nauto就一直在用艙內攝像頭監控商業車隊駕駛員的行為。同時,Nauto也一直用艙外攝像頭監控道路。這項研究收集了有關行人、騎自行車的人和其他車輛行為的知識。它捕獲了許多險些發生、緊急避險和高風險事件的場景。
通過結合艙外和艙內攝像頭的數據,Nauto看到了駕駛員分心行為和道路上實時發生的風險之間的關聯。該公司表示,它已經分析了“數十億的數據點”,并開發了“可以預測、防止和減少高風險事件的算法。”
800個車隊
當Heck創立Nauto時,科技行業對完全自動駕駛汽車(AV)充滿了期待。當時人們都在預測,AV的大量涌現意味著計算機駕駛員不僅將取代人類出租車和卡車司機,而且還會使街道更加安全。
與眾不同的是,Heck一直專注于幫助人們更好地駕駛,而不是取代他們。Nauto表示,其原始使命是為期八年,目的是為車隊駕駛員提供預防碰撞的能力。
將Nauto與大多數其他AV初創公司區分開來的是兩種商業實踐:首先,與商業車隊服務運營商建立合作關系;其次,專注于后市場以啟動Nauto平臺的部署。
Heck說,最初,Nauto強調的是艙內發生的場景。但在這個過程中,Nauto也收集了艙外的風險數據,例如追尾、斑馬線上的行人、信號燈和停車標識。
在開發AI算法來預測高風險事件時,Nauto采用了基于深度學習的方法,使用從800個商業車隊收集的數據。Heck估計,800個車隊相當于200,000名司機,車輛總數稍微少一些。
Nauto 學到了什么?
對于從200,000名車隊駕駛員收集的數據,Heck說,“所有碰撞事故的70%都是由駕駛員不注意引起的。比如使用手機、吃東西、低頭做別的事或困倦,導致了分心。”
這都讓Heck感到驚訝。他解釋說,這意味著“整個汽車行業歷來都只專注于那余下的30%,而忽視了由艙內引發的70%的風險。”
Heck稱駕駛員分心是“流行病”。盡管有這樣的證據,但車內監控仍然是一個相對新的功能。當Euro NCAP開始評估能有效檢測疲勞和分心的DMS時,汽車OEM們才開始有動力接受DMS。
安全專家們越來越認為,來自DMS的準確信息對安全至關重要。因為具有可脫手自動駕駛的車輛正在陸續推出。
當車廠允許人類駕駛員放開方向盤時,DMS是一個后備方案,它能準確地顯示出當計算機駕駛員需要接管方向盤時,人類司機正在做什么。
Nauto的路線圖
八年過去了,Nauto在車隊領域中取得了突破。Nauto的技術已被用于監控商業車隊駕駛員以提高安全性。
那么,接下來會是什么呢?Heck說,Nauto的路線圖上有四件事。
首要的是“融合”。
Nauto正在努力融合車輛的外部和內部風險,創建一個“在駕駛監控之上的下一級能力”。
Heck覺得車廠對有效的DMS越來越感興趣,而這正是Nauto的機會。
Heck說,內外攝像頭數據的融合產生了全面的安全光譜。“如果我們知道駕駛員分心了,我們會在碰撞之前更早介入。”他稱這是“一種新能力”,因為像前方碰撞預警這樣的ADAS功能通常獨立于DMS運行。
其次,Nauto的產品之前大部分在售后市場銷售,但即將進入OEM車輛。可以從BrightDrop獲得集成了Nauto的電動送貨車。Heck表示,Navistar正在推出搭載了Nauto的商用卡車,“在接下來的幾個月里還有更多的合作伙伴。”
第三,Nauto正在研究集成的保險模型。“我們有一個合作伙伴關系,任何公用事業公司只要有合適的保險供應商,就可以有效地免費獲取Nauto。”Heck提到了Nauto與英國最大的商業保險公司Aviva的試點項目。Nauto的下一個目標是美國。
Heck表示,公司的下一個目標是讓Nauto設計到乘用車中。盡管尚未宣布,但計劃是“首先將Nauto集成到輕型商用車、貨車和皮卡中……然后擴展到其它車型。”
硬件構成
任何好的AI算法都需要優秀的硬件,即合適的攝像頭和計算單元。那么,Nauto的售后市場平臺的硬件構成是什么呢?
Nauto平臺的艙外攝像頭采用了Sony圖像傳感器,而艙內攝像頭則是Omnivision的圖像傳感器。計算單元采用了Qualcomm Snapdragon 845,集成了高端GPU、DSP和8個Arm內核。
Heck說,Nauto在Snapdragon上運行的艙內和艙外算法最高可達每秒15幀。Nauto在Snapdragon的Arm內核上運行其融合模型。
Nauto平臺可從OBD端口獲取數據,使Nauto能夠讀取剎車位置、安全氣囊部署和其他車內機械裝置。Nauto從GPS傳感器和多普勒接收車輛位置和速度數據,然后融合所有數據。
當被問到這是如何工作時,Heck說:“我們會查看你面前是否有威脅,你正在以多快的速度行駛,你是否正在轉彎,以及你是否已經在剎車。然后我們會監控你的注意力狀態。如果你在保持專注,并且已經開始剎車,我們不會干擾,因為我們知道你已經看到了威脅,并且已經在應對它。但如果你正在加速或保持速度不變,而你面前有威脅,而你正在看手機或喝咖啡,那么我們會警告你并進行干預。”
那么,如果OEM想要在他們的車輛中使用Nauto,他們需要添加什么呢?
車輛應該有一個200-500MP的艙外攝像頭,Heck說:“低于720P,就很困難了。如果沒有艙內攝像頭顯然是個問題。但是,好在現在每個車廠都在考慮在他們的新車中增加DMS。”
大多數車輛已經有了GPS和LTE。但是算力呢?
Heck承認,這個特性的差別很大。對于使用Intel/Mobileye的車輛,Nauto運行在Xeon上。對于部署了Qualcomm高端汽車平臺的其他車輛,則沒有問題。Heck指出,現在只有少數OEM使用Nvidia。Nauto已經在Nvidia上進行了測試,但尚未部署。
關于Nauto的融合模型所需的處理能力,Heck表示:“這不是一個黑白分明的問題,因為算法的不同部分消耗的計算量不同……一般來說,它需要幾個TOPS。”
通過在AV堆棧上增加Nauto的融合模型,汽車OEM能獲得什么呢?Heck表示,Nauto可以為人類駕駛員提供更細顆粒度的安全介入。
“你看到一個行人正在你面前過馬路。如果你看著前方道路卻沒有做出反應,那就是……典型的行人碰撞預警的場景。所以,這種情況下我們只會在碰撞前約三秒鐘才介入。但如果你正在看手機,根本沒看行人,我們可能會在碰撞前四秒介入。而如果你已經開始剎車,然后,也在看行人,那么,我們就不會介入。”
Heck說,融合的目標是“稀疏但有效地介入。”
當Nauto供應售后市場產品時,它也提供了它開發的所有ADAS和DMS軟件部分。
但對于OEM車輛,所有的軟件部分都是“可選的”。例如,如果OEM更喜歡Mobileye的ADAS系統和Seeing Machines的DMS,那沒問題。OEM需要做的就是在他們的堆棧上添加Nauto更安全的融合模型。Nauto的模型可以授權。
競爭
盡管市面上還沒有ADAS+DMS融合模型,但Nauto可能不會長時間保持優勢。
一些DMS技術供應商正在他們的DMS算法中研發融合模型。
然而,Heck強調了Nauto的領先地位。“我們是行業先驅,我們擁有一些非常基本的關于內外融合的專利。”他沒有詳細說明,但補充說,“想要繞過這一點將會很困難。”
大數據也是Nauto的明顯優勢。因為Nauto起初在商用車隊中開始運營,積累了關于內外關系的數據。Heck表示,Nauto的大部分競爭對手要么“只關注艙內,要么只關注艙外,他們從未同時關注過兩者。”
接著是行駛里程。比起Waymo積累的2000萬英里(這是所有自動駕駛公司中最高的),Nauto已經行駛了30億英里。
最后,因為Nauto一直與車隊合作,Heck說:“我們實際上知道其中涉及的經濟風險。我們不僅會看它是否會導致碰撞,還會看碰撞的嚴重程度,以及會造成多大的損失。”
這種知識,在一個可預見的危險情況下,將促使Nauto的技術提前介入。另一方面,在較不危險的情況下,Nauto可以給予駕駛員更多的自由裁量權。Heck相信,管理這些變量最終可能會決定融合模型的用戶接受度。
Nauto已經進行了三輪融資,擁有約150名員工,其中三分之一是合同工。雖然尚未盈利,但Heck表示Nauto還處于“成長階段”,可能在幾年后進行IPO。
審核編輯 :李倩
-
攝像頭
+關注
關注
60文章
4851瀏覽量
95924 -
adas
+關注
關注
309文章
2187瀏覽量
208715 -
自動駕駛
+關注
關注
784文章
13877瀏覽量
166618
原文標題:Nauto的“ADAS+DMS”的融合模型
文章出處:【微信號:Astroys,微信公眾號:Astroys】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論