色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

康謀分享 | 如何應對ADAS/AD海量數據處理挑戰?

康謀自動駕駛 ? 2024-12-25 10:05 ? 次閱讀

隨著軟件定義汽車的發展,車輛生成的數據量也以前所未有的速度不斷增加。這些數據包含廣泛的信息,包括傳感器數據、遙測數據、診斷數據等。在開發過程中,有效處理這些數據并從中獲得見解至關重要。

對于原始設備制造商(OEM)和汽車一級供應商(Tier 1)來說,是否自主構建維護數據處理流程是一個至關重要的考慮因素。數據處理流程是應對當下軟件定義汽車所產生的海量數據的基礎組件。

一、問題背景

AWS 等云平臺上為高級駕駛輔助系統 (ADAS) 和自動駕駛 (AD) 數據構建魯棒的數據處理流程,通常需要全面了解各種服務及其集成。您可能使用的特定服務可能取決于應用程序的要求、數據源和處理需求

為了解決這一問題,康謀通過使用IVEX提出了專門用于應對ADAS/AD海量數據的數據處理流程。該流程的核心目的是自動從原始傳感器數據等輸入中識別出值得關注的事件和場景。構建這樣的數據處理流程需要仔細考慮各種技術方面,例如:原始傳感器數據的云端存儲、基于原始數據的算法執行(包括需要例如GPU等特定資源的機器學習算法)、事件和場景等后處理數據的存儲機制、算法版本控制、結果可視化以及確保數據僅對授權用戶可見。

wKgZO2dY8JuAHBTHAANWB-nAE6w607.png

二、內部構建或獲取預組裝解決方案

IVEX的數據處理流程基于多種AWS服務實現無縫銜接,以下是經過策略性部署的AWS服務

1. 原始傳感器的數據(包括激光雷達點云、相機圖像和GNSS信息)存儲在S3存儲服務中。S3用作采集數據的暫存地,為后期處理的數據提供擴展存儲,并為處理提供經濟高效的短期存儲解決方案。此外,使用S3掛載點功能能讓S3作為主要的“處理卷”,使其能夠像文件系統一樣使用。雖然它不完全符合POSIX標準,對某些工作負載存在限制,但可以通過整合EFS和可能添加的FSx來解決這個問題,以根據需要確保兼容性。

2. 處理后的數據(重要事件和場景)存儲在關系型數據庫服務(Relational Database Service,RDS)和DocDB中。RDS是一個高效的存儲庫,用于組織對分析至關重要的標記數據。同時,DocDB作為文檔存儲運行,它是專為快速變化的數據和顯示目的所需的二進制數據而設計的。

3. EKS和EC2處理算法執行和可視化任務。EKS充當一系列服務的主機,包括后端、數據服務、前端和處理服務。EC2主要用于根據為EKS制定的規則配置機器。

4. 算法的版本控制通過 ECR 進行管理。ECR用于存儲Docker容器鏡像。

5. 身份驗證通過Cognito進行。如果有必要,可以靈活地替換為任何OpenID Connect (OIDC)解決方案。

6. 數據傳輸和臨時數據存儲通過EFS進行管理。EFS作為臨時處理區域運行,供各種數據處理流水線存放中間數據并促進不同進程之間的數據共享。因為EFS完全符合POSIX標準,所以可以選擇它作為S3的替代文件系統。

這個方案示例突出了構建魯棒的ADAS/AD數據處理流程所涉及的眾多云服務,并強調了應對各種技術復雜性的必要性。此外,還必須解決諸如組織輸入數據、確保數據格式兼容性以及管理和監控數據格式變化等挑戰。

例如,隨著ADAS/AD系統的發展,添加更多傳感器以及管理不同車輛配置的需求成為數據處理流程中的關鍵考慮因素。如果不加以妥善處理,這些因素可能會導致不正確的數據處理,最終得到錯誤的結果。

wKgZO2drZfiAZSADAAD5Py-CrTU314.png

上圖列出的是構建此數據處理流程的預計工作量和成本細目,該處理流程可標記12種駕駛場景、提取駕駛參數,并支持可視化大型文件(≥ 10TB)

三、總結

總之,解決上述的這些問題需要付出大量的努力。顯而易見的是,選擇預先搭建好的數據處理流程將擁有更低的開銷。此后,便可以將節省的時間和成本分配給開發OEM和Tier1產品的關鍵方面。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 測試
    +關注

    關注

    8

    文章

    5295

    瀏覽量

    126621
  • 汽車電子
    +關注

    關注

    3026

    文章

    7950

    瀏覽量

    166986
  • 數據處理
    +關注

    關注

    0

    文章

    597

    瀏覽量

    28563
  • 無人駕駛
    +關注

    關注

    98

    文章

    4058

    瀏覽量

    120477
  • 自動駕駛
    +關注

    關注

    784

    文章

    13804

    瀏覽量

    166426
收藏 人收藏

    評論

    相關推薦

    產品 | 車載以太網:智能汽車通信的加速器

    為了應對車載網絡數據量激增等新挑戰,10GBase-T1標準正式發布,在此趨勢下,帶來了NETLion 10G,幫助工程師們進行
    的頭像 發表于 05-15 15:28 ?2092次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>產品 | 車載以太網:智能汽車通信的加速器

    分享 | ADTF過濾器全面解析:構建、配置與數據處理應用

    在ADTF(AutomotiveDataandTime-TriggeredFramework)中,過濾器(Filter)扮演著數據處理的核心角色。過濾器是處理數據流的基本單元,它們接收、處理
    的頭像 發表于 09-18 09:42 ?2527次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | ADTF過濾器全面解析:構建、配置與<b class='flag-5'>數據處理</b>應用

    分享 | AD/ADAS的性能概覽:在AD/ADAS的開發與驗證中“大海撈針”!

    在AD/ADAS開發與驗證中,如何從海量數據中快速獲得性能概覽,進而快速定位關鍵事件?本文康帶您了解,如何利用IVEX智能概覽功能,結合安全與關鍵績效指標,實現高效檢索與分析,推動A
    的頭像 發表于 10-23 09:24 ?2270次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | AD/<b class='flag-5'>ADAS</b>的性能概覽:在AD/<b class='flag-5'>ADAS</b>的開發與驗證中“大海撈針”!

    海量數據處理技術

    處理海量數據是大數據工程師必備技能,通過對PB級別的數據進行挖掘與分析發掘出有價值的信息,為企業或***做出正確決策提供依據,是十分必要的一
    發表于 03-23 14:23

    非結構化海量網絡數據處理技術研究

    本文由面及點地對網絡化測試系統中采集記錄的網絡數據進行了深層次的理解和多視角的剖析。同時為實現對非結構化海量網絡數據進行快速分析處理,對數據處理
    發表于 08-17 10:18 ?2011次閱讀
    非結構化<b class='flag-5'>海量</b>網絡<b class='flag-5'>數據處理</b>技術研究

    基于云計算的數據處理平臺研究設計

    通過分析亞馬遜彈性MapReduce( EMR)平臺構架,針對信息情報機構內部數據處理的迫切需求,提出通過開源技術Xen 和Hadoop平臺構建基于云計算的動態可伸縮的海量數據處理平臺并給出實施方案
    發表于 09-30 10:06 ?6次下載
    基于云計算的<b class='flag-5'>數據處理</b>平臺研究設計

    一種海量數據處理模型

    當今社會中,Web是最大的信息系統,它的價值主要來自于眾多用戶產生的數據,那么,如何在具有多樣性、傳輸條件不確定性等特點的海量數據巾提取出有價值的信息,這對程序員是一個很大的挑戰與難題
    發表于 11-13 15:14 ?4次下載
    一種<b class='flag-5'>海量</b><b class='flag-5'>數據處理</b>模型

    數據海量數據處理方法總結

    數據海量數據處理方法總結。
    發表于 04-26 09:16 ?13次下載

    產品 | 基于事件的智能數據管理平臺Heex

    自動駕駛HEEX致力于ADAS和AD開發中獲取針對性數據,即最相關的數據“智能數據”,采用基
    的頭像 發表于 01-10 17:36 ?429次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>產品 | 基于事件的智能<b class='flag-5'>數據</b>管理平臺Heex

    產品 | 為ADAS/AD開創的次世代AutoGI仿真工具

    aiSim5作為開創性ADAS/AD仿真模擬工具,配備高度優化的傳感器模擬,提供確定且可重復的環境模擬支持,為下一代仿真工具設定了新的標準。
    的頭像 發表于 01-29 17:50 ?694次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>產品 | 為<b class='flag-5'>ADAS</b>/AD開創的次世代AutoGI仿真工具

    分享 | 在基于場景的AD/ADAS驗證過程中,識別挑戰性場景!

    基于場景的驗證是AD/ADAS系統開發過程中的重要步驟,然而面對海量駕駛記錄數據時,如何實現自動且高效地識別、分類和提取駕駛記錄中的挑戰性場景?本文康
    的頭像 發表于 08-28 10:16 ?1069次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | 在基于場景的AD/<b class='flag-5'>ADAS</b>驗證過程中,識別<b class='flag-5'>挑戰</b>性場景!

    分享 | 汽車仿真與AI的結合應用

    實現高質量的虛擬傳感器輸出是自動駕駛領域的一項關鍵挑戰,然而傳統方案對廣角鏡頭的渲染和處理等方面仍存在一定的局限性。為此,為您介紹aiSim通用高斯潑濺渲染器如何打破限制,在自動駕
    的頭像 發表于 09-11 09:24 ?1472次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | 汽車仿真與AI的結合應用

    分享 | 直面AD/ADAS快速開發挑戰:IVEX自動駕駛場景管理及分析平臺!

    如何快速了解開發 AD/ADAS 組件中的車輛行為以便進行改進,是目前開發 AD/ADAS 組件時面臨的重大挑戰。為此,推出IVEX自動
    的頭像 發表于 09-25 09:27 ?789次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | 直面AD/<b class='flag-5'>ADAS</b>快速開發<b class='flag-5'>挑戰</b>:IVEX自動駕駛場景管理及分析平臺!

    分享 | 數據隱私和匿名化:PIPL與GDPR下,如何確保數據合規?(二)

    自動駕駛技術飛速發展,但數據隱私安全成攔路虎?別擔心,本文帶您深入剖析PIPL與GDPR在數據處理行為及基礎合法性方面的異同之處,幫助您準確把握法規要求,從而利用匿名化處理工具有效應對跨境數據
    的頭像 發表于 10-30 09:30 ?1071次閱讀
    <b class='flag-5'>康</b><b class='flag-5'>謀</b>分享 | <b class='flag-5'>數據</b>隱私和匿名化:PIPL與GDPR下,如何確保<b class='flag-5'>數據</b>合規?(二)

    海量數據處理需要多少RAM內存

    海量數據處理所需的RAM(隨機存取存儲器)內存量取決于多個因素,包括數據的具體規模、處理任務的復雜性、數據庫管理系統的效率以及所使用軟件的優
    的頭像 發表于 11-11 09:56 ?302次閱讀
    主站蜘蛛池模板: 蜜桃麻豆WWW久久囤产精品免费| 成人亚洲乱码在线| 亚洲欧美韩国综合色| 同桌别揉我奶了嗯啊| 神马电影dy888午夜我不卡| 全黄H全肉细节文NP| 日韩一区二区三区精品| 日韩1区1区产品乱码芒果榴莲| 欧美最猛性xxxxx亚洲精品| 欧美人与禽ZOZO性伦交视频| 強姧伦久久久久久久久| 全文都是肉高h文| 三级aa久久| 午夜插插插| 亚洲欧美日韩高清专区| 一本道的mv中文字幕| 渔夫床满艳史bd高清在线直播| 在线亚洲免费| 97在线国内自拍视频| www.伊人| 高h原耽肉汁动漫视频| 国产免费人成在线视频有码| 国产一区二区青青精品久久| 精品爽爽久久久久久蜜臀| 久久精品亚洲国产AV涩情| 美女内射少妇三区五区| 女人会操出水图| 肉动漫3D卡通无修在线播放| 无毒成人社区| 亚洲一区免费在线观看| 1300部真实小Y女视频合集| max girls 大感谢祭| 国产交换丝雨巅峰| 国语自产一区视频| 亚洲精品无码国产爽快A片百度 | 成年人免费观看视频网站| 国产99久久九九免费精品无码 | 2019中文字幕乱码免费| japanese from色系| 国产国拍精品AV在线观看 | xxxx88|