色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Nauto的“ADAS+DMS”的融合模型

Astroys ? 來源:Astroys ? 2023-05-30 11:11 ? 次閱讀

隨著DMS即將廣泛采用,初創公司Nauto看到了一個機會,通過融合艙外和艙內攝像頭的數據,將其AI算法出售給OEM。Nauto是否真的在正確的時間推出了正確的技術呢?

許多車廠已經在多款車型上采用了ADAS,搭載多個攝像頭。同時,車廠也在搭載DMS,用攝像頭監控車內人類駕駛員的行為。

但這兩個系統從來都不是一起工作的。ADAS和DMS由不同的供應商開發,兩個系統間的數據也無法互相關聯(雖然說的不是一回事,但我總是能想起小鵬車主下跪刷臉是怎么回事……)。

加州Palo Alto的初創公司Nauto,希望改變這一情況。通過一個平臺,融合車輛外部和內部生成的數據,Nauto相信它將有助于提升道路與駕駛安全。

Nauto的創始人兼CEO Stefan Heck解釋說,“消費者反饋顯示,許多駕駛員對ADAS或DMS經常發出的誤報感到惱火。這代表行業還沒有做對這一點。”

數據融合

從2015年起,Nauto就一直在用艙內攝像頭監控商業車隊駕駛員的行為。同時,Nauto也一直用艙外攝像頭監控道路。這項研究收集了有關行人、騎自行車的人和其他車輛行為的知識。它捕獲了許多險些發生、緊急避險和高風險事件的場景。

通過結合艙外和艙內攝像頭的數據,Nauto看到了駕駛員分心行為和道路上實時發生的風險之間的關聯。該公司表示,它已經分析了“數十億的數據點”,并開發了“可以預測、防止和減少高風險事件的算法。”

800個車隊

當Heck創立Nauto時,科技行業對完全自動駕駛汽車(AV)充滿了期待。當時人們都在預測,AV的大量涌現意味著計算機駕駛員不僅將取代人類出租車和卡車司機,而且還會使街道更加安全。

與眾不同的是,Heck一直專注于幫助人們更好地駕駛,而不是取代他們。Nauto表示,其原始使命是為期八年,目的是為車隊駕駛員提供預防碰撞的能力。

將Nauto與大多數其他AV初創公司區分開來的是兩種商業實踐:首先,與商業車隊服務運營商建立合作關系;其次,專注于后市場以啟動Nauto平臺的部署。

Heck說,最初,Nauto強調的是艙內發生的場景。但在這個過程中,Nauto也收集了艙外的風險數據,例如追尾、斑馬線上的行人、信號燈和停車標識。

在開發AI算法來預測高風險事件時,Nauto采用了基于深度學習的方法,使用從800個商業車隊收集的數據。Heck估計,800個車隊相當于200,000名司機,車輛總數稍微少一些。

Nauto 學到了什么?

對于從200,000名車隊駕駛員收集的數據,Heck說,“所有碰撞事故的70%都是由駕駛員不注意引起的。比如使用手機、吃東西、低頭做別的事或困倦,導致了分心。”

這都讓Heck感到驚訝。他解釋說,這意味著“整個汽車行業歷來都只專注于那余下的30%,而忽視了由艙內引發的70%的風險。”

Heck稱駕駛員分心是“流行病”。盡管有這樣的證據,但車內監控仍然是一個相對新的功能。當Euro NCAP開始評估能有效檢測疲勞和分心的DMS時,汽車OEM們才開始有動力接受DMS。

安全專家們越來越認為,來自DMS的準確信息對安全至關重要。因為具有可脫手自動駕駛的車輛正在陸續推出。

當車廠允許人類駕駛員放開方向盤時,DMS是一個后備方案,它能準確地顯示出當計算機駕駛員需要接管方向盤時,人類司機正在做什么。

Nauto的路線圖

八年過去了,Nauto在車隊領域中取得了突破。Nauto的技術已被用于監控商業車隊駕駛員以提高安全性。

那么,接下來會是什么呢?Heck說,Nauto的路線圖上有四件事。

首要的是“融合”。

Nauto正在努力融合車輛的外部和內部風險,創建一個“在駕駛監控之上的下一級能力”。

Heck覺得車廠對有效的DMS越來越感興趣,而這正是Nauto的機會。

Heck說,內外攝像頭數據的融合產生了全面的安全光譜。“如果我們知道駕駛員分心了,我們會在碰撞之前更早介入。”他稱這是“一種新能力”,因為像前方碰撞預警這樣的ADAS功能通常獨立于DMS運行。

a6290f3e-fe81-11ed-90ce-dac502259ad0.png

其次,Nauto的產品之前大部分在售后市場銷售,但即將進入OEM車輛。可以從BrightDrop獲得集成了Nauto的電動送貨車。Heck表示,Navistar正在推出搭載了Nauto的商用卡車,“在接下來的幾個月里還有更多的合作伙伴。”

第三,Nauto正在研究集成的保險模型。“我們有一個合作伙伴關系,任何公用事業公司只要有合適的保險供應商,就可以有效地免費獲取Nauto。”Heck提到了Nauto與英國最大的商業保險公司Aviva的試點項目。Nauto的下一個目標是美國。

Heck表示,公司的下一個目標是讓Nauto設計到乘用車中。盡管尚未宣布,但計劃是“首先將Nauto集成到輕型商用車、貨車和皮卡中……然后擴展到其它車型。”

硬件構成

任何好的AI算法都需要優秀的硬件,即合適的攝像頭和計算單元。那么,Nauto的售后市場平臺的硬件構成是什么呢?

Nauto平臺的艙外攝像頭采用了Sony圖像傳感器,而艙內攝像頭則是Omnivision的圖像傳感器。計算單元采用了Qualcomm Snapdragon 845,集成了高端GPUDSP和8個Arm內核。

Heck說,Nauto在Snapdragon上運行的艙內和艙外算法最高可達每秒15幀。Nauto在Snapdragon的Arm內核上運行其融合模型。

Nauto平臺可從OBD端口獲取數據,使Nauto能夠讀取剎車位置、安全氣囊部署和其他車內機械裝置。Nauto從GPS傳感器和多普勒接收車輛位置和速度數據,然后融合所有數據。

當被問到這是如何工作時,Heck說:“我們會查看你面前是否有威脅,你正在以多快的速度行駛,你是否正在轉彎,以及你是否已經在剎車。然后我們會監控你的注意力狀態。如果你在保持專注,并且已經開始剎車,我們不會干擾,因為我們知道你已經看到了威脅,并且已經在應對它。但如果你正在加速或保持速度不變,而你面前有威脅,而你正在看手機或喝咖啡,那么我們會警告你并進行干預。”

那么,如果OEM想要在他們的車輛中使用Nauto,他們需要添加什么呢?

車輛應該有一個200-500MP的艙外攝像頭,Heck說:“低于720P,就很困難了。如果沒有艙內攝像頭顯然是個問題。但是,好在現在每個車廠都在考慮在他們的新車中增加DMS。”

大多數車輛已經有了GPS和LTE。但是算力呢?

Heck承認,這個特性的差別很大。對于使用Intel/Mobileye的車輛,Nauto運行在Xeon上。對于部署了Qualcomm高端汽車平臺的其他車輛,則沒有問題。Heck指出,現在只有少數OEM使用Nvidia。Nauto已經在Nvidia上進行了測試,但尚未部署。

關于Nauto的融合模型所需的處理能力,Heck表示:“這不是一個黑白分明的問題,因為算法的不同部分消耗的計算量不同……一般來說,它需要幾個TOPS。”

通過在AV堆棧上增加Nauto的融合模型,汽車OEM能獲得什么呢?Heck表示,Nauto可以為人類駕駛員提供更細顆粒度的安全介入。

“你看到一個行人正在你面前過馬路。如果你看著前方道路卻沒有做出反應,那就是……典型的行人碰撞預警的場景。所以,這種情況下我們只會在碰撞前約三秒鐘才介入。但如果你正在看手機,根本沒看行人,我們可能會在碰撞前四秒介入。而如果你已經開始剎車,然后,也在看行人,那么,我們就不會介入。”

Heck說,融合的目標是“稀疏但有效地介入。”

當Nauto供應售后市場產品時,它也提供了它開發的所有ADAS和DMS軟件部分。

但對于OEM車輛,所有的軟件部分都是“可選的”。例如,如果OEM更喜歡Mobileye的ADAS系統和Seeing Machines的DMS,那沒問題。OEM需要做的就是在他們的堆棧上添加Nauto更安全的融合模型。Nauto的模型可以授權。

競爭

盡管市面上還沒有ADAS+DMS融合模型,但Nauto可能不會長時間保持優勢。

一些DMS技術供應商正在他們的DMS算法中研發融合模型。

然而,Heck強調了Nauto的領先地位。“我們是行業先驅,我們擁有一些非常基本的關于內外融合的專利。”他沒有詳細說明,但補充說,“想要繞過這一點將會很困難。”

大數據也是Nauto的明顯優勢。因為Nauto起初在商用車隊中開始運營,積累了關于內外關系的數據。Heck表示,Nauto的大部分競爭對手要么“只關注艙內,要么只關注艙外,他們從未同時關注過兩者。”

接著是行駛里程。比起Waymo積累的2000萬英里(這是所有自動駕駛公司中最高的),Nauto已經行駛了30億英里。

最后,因為Nauto一直與車隊合作,Heck說:“我們實際上知道其中涉及的經濟風險。我們不僅會看它是否會導致碰撞,還會看碰撞的嚴重程度,以及會造成多大的損失。”

這種知識,在一個可預見的危險情況下,將促使Nauto的技術提前介入。另一方面,在較不危險的情況下,Nauto可以給予駕駛員更多的自由裁量權。Heck相信,管理這些變量最終可能會決定融合模型的用戶接受度。

Nauto已經進行了三輪融資,擁有約150名員工,其中三分之一是合同工。雖然尚未盈利,但Heck表示Nauto還處于“成長階段”,可能在幾年后進行IPO。

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 攝像頭
    +關注

    關注

    60

    文章

    4851

    瀏覽量

    95924
  • adas
    +關注

    關注

    309

    文章

    2187

    瀏覽量

    208715
  • 自動駕駛
    +關注

    關注

    784

    文章

    13877

    瀏覽量

    166618

原文標題:Nauto的“ADAS+DMS”的融合模型

文章出處:【微信號:Astroys,微信公眾號:Astroys】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    商湯科技推出“日日新”融合模型

    剛剛,商湯正式推出“日日新”融合模型,領先實現原生融合模態,深度推理能力與多模態信息處理能力均大幅提升,并在兩大權威評測榜單奪得第一,成為“雙冠王”。
    的頭像 發表于 01-10 15:59 ?150次閱讀

    守護駕駛安全,駕駛員監控系統DMS應用解決方案

    汽車駕駛員監控系統又稱DMS,是一種集中在車輛中的技術,用于實時跟蹤和評估駕駛員狀態及駕駛行為。隨著汽車產業智能化轉型,整合AI技術的DMS逐漸成為主流,AI模型通過大量數據進行持續訓練,使得駕駛
    的頭像 發表于 12-19 17:28 ?860次閱讀
    守護駕駛安全,駕駛員監控系統<b class='flag-5'>DMS</b>應用解決方案

    國產硅振替換SiTime應用于汽車DMS,相位抖動低于350fs

    國產硅振替換SiTime應用于汽車DMS,相位抖動低于350fs
    的頭像 發表于 12-16 09:52 ?138次閱讀
    國產硅振替換SiTime應用于汽車<b class='flag-5'>DMS</b>,相位抖動低于350fs

    智駕軟件冒煙測試之測試管理軟件解決方案#ADAS #自動駕駛 #冒煙測試

    adas
    北匯信息POLELINK
    發布于 :2024年09月29日 13:41:46

    MXoptiCal-簡化精密測量-只需幾個步驟即可實現一致的目標測量#ADAS

    adas
    北匯信息POLELINK
    發布于 :2024年09月20日 10:16:32

    減少基于攝像頭的駕駛員監控系統(DMS)的布線量

    電子發燒友網站提供《減少基于攝像頭的駕駛員監控系統(DMS)的布線量.pdf》資料免費下載
    發表于 08-28 10:26 ?1次下載
    減少基于攝像頭的駕駛員監控系統(<b class='flag-5'>DMS</b>)的布線量

    ADAS功能安全HiL仿真測試系統介紹#ADAS #VTHiL

    adas
    北匯信息POLELINK
    發布于 :2024年08月03日 20:07:34

    ADAS系統組成簡介#ADAS

    adas
    北匯信息POLELINK
    發布于 :2024年08月03日 20:05:37

    LeddarTech和Immervision達成合作,加速ADAS和AD感知模型訓練

    近日,汽車技術領域的兩家領軍企業LeddarTech和Immervision宣布達成合作,共同推動高級駕駛輔助系統(ADAS)和自動駕駛(AD)感知模型訓練的發展。
    的頭像 發表于 05-11 10:44 ?404次閱讀

    LeddarTech 和 Immervision 聯合宣布 合作加速 ADAS 和 AD 感知模型訓練

    宣布了一項合作,旨在簡化感知模型訓練過程,使其更快、更具成本效益并減少數據密集度。LeddarTech 是一家汽車軟件公司,為高級駕駛輔助系統?(ADAS) 和自動駕駛?(AD) 和停車應用,提供
    的頭像 發表于 05-09 10:54 ?596次閱讀
    LeddarTech 和 Immervision 聯合宣布 合作加速 <b class='flag-5'>ADAS</b> 和 AD 感知<b class='flag-5'>模型</b>訓練

    英特爾開發套件『哪吒』在Java環境實現ADAS道路識別演示 | 開發者實戰

    本文使用來自OpenModelZoo的預訓練的road-segmentation-adas-0001模型ADAS代表高級駕駛輔助服務。該模型識別四個類別:背景、道路、路緣和標記。硬件
    的頭像 發表于 04-29 08:07 ?605次閱讀
    英特爾開發套件『哪吒』在Java環境實現<b class='flag-5'>ADAS</b>道路識別演示 | 開發者實戰

    車載智能終端設備ADAS|DMS_智能汽車行車記錄儀方案

    內容。另外,它還支持雙TF卡音視頻存儲、4G網絡實時視頻傳輸以及北斗/GPS定位功能。更重要的是,它內置了主動安全算法,可以實現安全駕駛預警功能。因此,這款ADAS/DMS車載智能終端廣泛應用于網約車
    的頭像 發表于 04-23 19:54 ?819次閱讀
    車載智能終端設備<b class='flag-5'>ADAS</b>|<b class='flag-5'>DMS</b>_智能汽車行車記錄儀方案

    英特爾開發套件在Java環境實現ADAS道路識別演示

    本文使用來自Open Model Zoo的預訓練的 road-segmentation-adas-0001模型ADAS 代表高級駕駛輔助服務。該模型識別四個類別:背景、道路、路緣和標
    的頭像 發表于 04-20 10:32 ?597次閱讀
    英特爾開發套件在Java環境實現<b class='flag-5'>ADAS</b>道路識別演示

    TC系列可以做ADAS嗎?

    TC系列可以做ADAS嗎?
    發表于 02-06 08:22

    請問ADAS實際道路在線評測系統需要采集什么數據?

    ADAS實際道路在線評測系統需要采集什么數據?
    發表于 02-01 06:01
    主站蜘蛛池模板: 97在线观看成人免费视频| 福利社影院| 国产又粗又猛又爽又黄的免费视频| 双性精跪趴灌满h室友4p| 国产精品丰满人妻AV麻豆 | 草b是什么感觉| 沈芯语麻豆0076 视频| 国精产品一区二区三区有限公司| 亚洲三级视频| 免费国产久久啪在线| 把腿张开再深点好爽宝贝动态图 | 熟女人妻AV五十路六十路| 国产小视频免费在线观看| 永久adc视频| 欧美香蕉大胸在线视频观看| 国产成年人在线观看| 一品探花论坛| 色中色成人论坛| 久久久无码精品亚洲A片软件| WWW亚洲精品久久久无码| 亚洲精品国产熟女久久久| 女性性纵欲派对| 狠狠色狠狠色综合日日91app| babesvideos性欧美| 亚洲精品无码不卡在线播放he| 欧美国产日韩久久久| 国产曰韩无码亚洲视频| mxgs-877痉挛媚药按摩| 亚洲中文在线精品国产| 日本2021免费一二三四区| 久久热精品18国产| 国产偷国产偷亚洲高清SWAG| 99精品视频| 亚洲视频中文字幕| 青青视频国产色偷偷| 久久 这里只精品 免费| 纯肉腐文高H总受男男| 无颜之月5集全免费看无删除| 牛牛在线1视频| 国产日韩欧美综合久久| 午夜精品久久久久久影视riav|