色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

新型攝像頭與算法結合 實現飛行器3.5 毫秒快速反應

454398 ? 來源:ST社區 ? 作者:ST社區 ? 2020-09-30 17:06 ? 次閱讀

用籃球砸中 3 米外懸停的無人機,你能做到嗎?

那些打過籃球并玩過無人機的人,會想當然地回答,小事一樁。但在這臺無人機面前,你錯了,因為它會快速、靈活地躲避飛來的襲擊。

最近,來自瑞士蘇黎世大學(University of Zurich)的研究人員設計出一種新方法,可以讓無人機在主動躲閃移動障礙物的情況下快速導航。該研究讓無人機向著擁有更優異的性能,比如在惡劣環境下更快速地飛行,在更短時間內完成更多任務等邁出很大一步。

圖 | 成功躲避球的無人機(來源:Davide Scaramuzza)

當下市面上的無人機已經可以承擔很多工作,但是躲避障礙物并不是它們的強項——尤其是在無人機快速移動時。盡管許多飛行機器人都配備了可以檢測障礙物的攝像頭,但通常它們都需要 20~40 毫秒的時間來處理圖像并做出反應。這個時間看似很快,但當無人機自身以較高的速度飛行時,20~40 毫秒的反應時間對于避開飛鳥或者另一架無人機,甚至是靜態障礙物來說,都是不夠的。尤其是當無人機在一個不可預測的環境中使用時,或者有多架無人機在同一片區域飛行時,這會是個棘手的問題。

蘇黎世大學的研究人員將一種類似運動傳感器的 “事件攝像頭” 整合在一起,并設計了新的算法,從而將無人機的反應時間縮短到了幾毫秒。這個近乎一個數量級的提升,足以讓無人機在空中躲開短距離內向其砸來的球或其他物品該研究發表在了最新一期的《科學 · 機器人》(Science Robotics)雜志上,由蘇黎世大學機器人技術和感知方向的教授 Davide Scaramuzza 領導。

新型攝像頭與算法結合,3.5 毫秒快速反應

傳統的攝像頭,例如智能手機上的那種,都是通過定期拍攝整個場景的快照來工作,它會同時曝光圖像的所有像素。但是,通過這種方式,只能在機載計算機分析完所有像素之后才能檢測到運動物體。

Davide 研究團隊的 “事件攝像頭” 則不同,其具有彼此獨立工作的智能像素。它在未檢測到外界的變化像素時會保持沉默,而一旦看到了光強度變化的像素就會立即發送信息。這樣一來,機載計算機只需處理圖像中的一小部分變化像素,因此大大加快了計算速度,從而縮短了反應時間。

Davide 向 DeepTech 具體解釋道:“事件在時空域中生成一個體。我們的算法只考慮在過去 10 毫秒內出現的事件。我們補償攝像頭看到的運動,并分析所有事件的統計數據。對于每個像素,我們計算歸一化的平均時間戳,它的范圍介于 -1 和 1 之間,動態對象的得分非常接近于 1。這使我們可以將事件的閾值分別以靜態對象和動態對象區分開。”

圖 | 自我運動補償算法的各個階段,以便區分出屬于移動障礙的事件(來源:Davide Scaramuzza)

除此之外,“目前的無人機,其目標檢測算法無法很好地和我們開發的新型攝像頭配合工作。”Davide 解釋說,“事件攝像頭”是一項最近的創新工作,并且功能與傳統攝像頭不同。我們的攝像頭不以恒定的時間間隔輸出標準圖像,而是輸出與每個像素強度變化相對應的異步事件流。因此,其他研究人員必須發明自己的算法,在很短的時間內收集攝像頭記錄的所有事件,然后減去無人機自身運動的影響。

據 Davide 介紹,該研究使用的 “事件攝像頭”,目前世界上只有 5 家公司生產。“因為這種傳感器直到 10 年前還只是研究原型,我們使用的是 Insightness 公司的設備。” 研究中所用的無人機平臺,是 Davide 實驗室定制的四軸飛行器,跟市售的商品區別不是很大,但用于感知和導航的算法都是他的團隊開發的。

在研究過程中,Davide Scaramuzza 和同事首先分別測試了攝像頭和算法。

在攝像頭被單獨靜止放置時,他們將各種形狀和大小的物體扔向它,同時測量了算法檢測物體的效率。結果顯示,根據物體大小和投擲距離的不同,檢測成功率在 81%~97% 之間上下浮動。此外,該系統的平均反應時間只需 3.5 毫秒,便可檢測到飛來的物體。

隨后,最為嚴峻的考驗開始了:他們將攝像頭安裝在真正的無人機上,讓其在室內和室外飛行,然后直接向無人機投擲物體。經過多次測試,無人機能夠成功避開物體的概率超過 90%,這其中包括從 3 米遠的地方以 10 米 / 秒的速度扔出的球。當測試無人機提前 “知道” 物體的大小時,只需一臺 “事件攝像頭” 就足夠了;而當無人機需要面對大小不同的飛來物體時,則需要使用兩個攝像頭來為其提供立體視覺。

正在接洽商業化

那么,這項研究能否在短期內投入規模化應用呢?Davide 向 DeepTech 透露:“在原則上,該技術已經做好了商業化準備,我們正在與一些公司討論細節之中。”

至于未來的研究方向,Davide 對 DeepTech 說:“我們的計劃是在一個更靈活的四旋翼上測試這個系統。而對于更長遠的目標,我們最終是想有一天能夠讓無人機達到如今飛行員操縱一般的駕駛自如。當前,在涉及無人機的所有搜索和救援應用中,實際上都是人為控制的。如果我們能讓無人機擁有像人類飛行員一樣可靠的導航能力,那么就可以將其用于超出視線范圍或無法遠程控制的任務中。

圖 | 比較傳統攝像頭與事件攝像頭的輸出:傳統攝像頭以固定的速率捕獲幀;而事件攝像頭僅以時空事件的螺旋形式,連續輸出亮度變化的信號,紅色為正向變化,藍色為負向變化(來源:Davide Scaramuzza)

Davide Scaramuzza 所在的蘇黎世大學機器人與感知小組實驗室,一直專注于開發可以讓自動無人機快速飛行的新技術,以便執行對時間要求更為嚴格的任務,例如在發生自然災害之后對惡劣的環境進行探索等。

“對于諸如地震、海嘯發生后的搜尋和救援工作來說,時間是非常關鍵的。因此人們需要能夠在有限的電量時間內(通常為 10~20 分鐘)完成盡可能多任務的快速導航無人機。” Davide 向 DeepTech 解釋道。“當我們的新攝像頭將無人機的導航速度提高十倍左右時,也擴展了其潛在的其他應用可能。”

“未來總有一天,無人機將會被投入到各種各樣的應用中,例如貨物交付、人員運輸、航空攝影術等,當然還有提到的搜救。” 他說,“但是,讓機器人能夠更快地感知并更快地做出決策,對于其他領域來說也可以改變游戲規則。在一些領域中,比如無人駕駛汽車、運輸、采礦機器人,以及進行遠程檢查工作的設備等,可靠地檢測視野內的障礙也是至關重要的。

安全問題,對于每個人來說都是非常重要的事情。“我們的研究向著未來無人機或者汽車更加智能化且更加安全邁出了一小步。” 他表示,他和團隊成員對這項研究所展現的躲避功能感到十分興奮,“我們從未見過商用無人機對快速移動的障礙做出如此迅速的反應,這是所有飛行機器人在任何環境中安全導航的關鍵要素。”

植根學界,兼顧創業

Davide Scaramuzza 于 1980 年出生于意大利,目前是蘇黎世大學信息學和神經信息學的教授,同時他也是蘇黎世聯邦理工學院(ETH Zurich)神經信息學教授。他從事機器人、計算機視覺和神經科學交叉領域的研究。具體來說,他研究標準和神經形態攝像頭的使用,使微型無人機在搜索和救援場景中能夠自主、靈活地導航。

他在蘇黎世聯邦理工學院獲得了機器人和計算機視覺博士學位,隨后在賓夕法尼亞大學(University of Pennsylvania)進行博士后的學習和工作。從 2009 年到 2012 年,他領導了歐洲 sFly 項目——該項目引入了 PX4 自動駕駛儀,并開創了基于視覺沖擊的微型無人機自主導航。

由于他在視覺導航方面的研究貢獻,他被授予 IEEE 機器人與自動化社會職業生涯早期獎,SNSF-ERC 啟動資金,谷歌研究獎,庫卡、高通英特爾等獎項,歐洲青年研究獎,Misha Mahowald 神經形態工程獎,以及一些會議論文獎等。

他與人合著了《自主移動機器人導論》(Introduction to Autonomous Mobile Robots,由 MIT Press 出版),并在頂級期刊(TRO、PAMI、IJCV、IJRR)和會議(RSS、ICRA、CVPR、ICCV)上發表過 100 多篇關于機器人和感知的論文。

2015 年,Davide 與他人共同創立了一家名為“蘇黎世之眼”(Zurich-Eye)的公司,致力于將移動機器人的視覺慣性導航解決方案商業化,該公司后來成為了 Oculus 公司(2014 年被 Facebook 收購, 5 年多時間馬克 ? 扎克伯格在虛擬現實領域投入了數十億美元)的歐洲研究中心。此外,他還是 Dacuda 公司(瑞士一家計算機視覺公司,其 3D 部門在 2017 年被 Magic Leap 公司收購)的戰略顧問。

編輯:hfy

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    31000

    瀏覽量

    269333
  • 移動機器人
    +關注

    關注

    2

    文章

    763

    瀏覽量

    33580
  • 飛行器
    +關注

    關注

    13

    文章

    723

    瀏覽量

    45544
  • 無人機
    +關注

    關注

    230

    文章

    10454

    瀏覽量

    180806
  • 運動傳感器
    +關注

    關注

    9

    文章

    164

    瀏覽量

    30776
收藏 人收藏

    評論

    相關推薦

    安防監控攝像頭氣密性測試案例-連拓精密#攝像頭氣密檢測設備

    攝像頭
    連拓精密科技
    發布于 :2024年12月11日 15:00:21

    多光譜火焰檢測攝像頭

    隨著工業化進程的加快,火災安全問題日益受到重視。傳統的火焰檢測技術主要依賴于溫度傳感和煙霧探測,但這些方法在某些情況下存在響應慢、誤報率高等缺陷。為了解決這些問題,多光譜火焰檢測攝像頭應運而生
    的頭像 發表于 12-11 10:50 ?142次閱讀
    多光譜火焰檢測<b class='flag-5'>攝像頭</b>

    攝像頭及紅外成像的基本工作原理

    本文介紹了攝像頭及紅外成像的基本工作原理,攝像頭可以將看到的圖像真實的呈現出來,所見即所得! 攝像頭如何工作? 攝像頭可以將看到的圖像真實的呈現出來,所見即所得。 ? 比如人眼看到的一
    的頭像 發表于 11-25 09:28 ?455次閱讀
    <b class='flag-5'>攝像頭</b>及紅外成像的基本工作原理

    用于環視和CMS攝像頭系統的四通道攝像頭應用程序

    電子發燒友網站提供《用于環視和CMS攝像頭系統的四通道攝像頭應用程序.pdf》資料免費下載
    發表于 10-11 10:02 ?0次下載
    用于環視和CMS<b class='flag-5'>攝像頭</b>系統的四通道<b class='flag-5'>攝像頭</b>應用程序

    NVIDIA多攝像頭追蹤工作流的應用架構

    為提高安全性并優化運營,倉庫、工廠、體育場、機場等大型區域通常會有數百個攝像頭進行監控。多攝像頭追蹤指的是通過這些攝像頭追蹤對象,并精確測量其活動,以此實現對空間的有效監控和管理。
    的頭像 發表于 09-06 14:23 ?347次閱讀
    NVIDIA多<b class='flag-5'>攝像頭</b>追蹤工作流的應用架構

    監控室離崗智能監測攝像頭

    監控室離崗智能監測攝像頭是一種應用于監控室的智能設備,旨在監測監控室內工作人員的狀態,及時警示相關部門或人員,保障監控室的安全和工作效率。這種智能監測攝像頭結合了人臉識別技術和智能算法
    的頭像 發表于 08-07 10:39 ?424次閱讀
    監控室離崗智能監測<b class='flag-5'>攝像頭</b>

    CANape Option DA中參考攝像頭的標定演示#CANape

    攝像頭
    北匯信息POLELINK
    發布于 :2024年07月30日 12:37:29

    安防攝像頭IPC芯片的應用

    安防攝像頭IPC芯片的應用
    的頭像 發表于 07-22 09:42 ?792次閱讀
    安防<b class='flag-5'>攝像頭</b>IPC芯片的應用

    基于FPGA的攝像頭心率檢測裝置設計

    時間很長,且對環境要求較為嚴格。 基此,我們對其算法進行優化,設計出更快運算速度, 可在更復雜環境較準確測心率的攝像頭心率檢測裝置。本系統著眼機器視覺,是集合圖像處理技術、HDMI 顯示技術的智能
    發表于 07-01 17:58

    esp32是如何與攝像頭連接的呢?

    新手。看了esp32的模組中沒有攝像頭的硬件接口,請問它是如何與攝像頭連接的呢
    發表于 06-28 15:01

    攝像頭模組電路

    求助各位大佬,想問一下攝像頭模組硬件電路大概需要怎么設計
    發表于 06-07 10:29

    智能攝像頭抄表是什么?

    進行圖像識別,實現無接觸、無誤差的遠程抄表,極大地提高了抄表效率和準確性。2.技術原理與優勢2.1AI圖像識別:智能攝像頭抄表的核心在于其內置的AI算法,能夠準
    的頭像 發表于 04-24 14:14 ?638次閱讀
    智能<b class='flag-5'>攝像頭</b>抄表<b class='flag-5'>器</b>是什么?

    高清網絡攝像頭多媒體智能屏

    。同時,在屏幕上顯示攝像頭畫面可直接通過DGUS開發來實現,十分快捷。硬件接口展示:產品特點支持通過以太網、WiFi(2.4GHz、5GHz均可)連接網絡攝像頭;支
    的頭像 發表于 02-19 13:21 ?604次閱讀
    高清網絡<b class='flag-5'>攝像頭</b>多媒體智能屏

    用usb攝像頭替換手機前置攝像頭可以嗎

    將從技術實現、可行性和使用體驗三方面,探討這個問題。 一、技術實現: USB攝像頭的連接:USB攝像頭通過USB接口與智能手機連接。目前,大部分智能手機都支持USB On-The-Go
    的頭像 發表于 01-08 14:11 ?2913次閱讀
    主站蜘蛛池模板: 国产人妻麻豆蜜桃色69| XXX国产麻豆HD真实乱| 又黄又肉到湿的爽文| 国产精品久久久久成人免费| 免费三级黄色| 一区二区乱子伦在线播放| 国内精品日本久久久久影院 | 涩涩免费视频软件| FREE17一18外女破| 欧美16一17sex性hd| 97国产在线观看| 男女后进式猛烈xx00动态图片| 在线看片韩国免费人成视频| 久久国产乱子伦免费精品| 一个人在线观看免费视频| 精品性影院一区二区三区内射| 一区二区不卡在线视频| 久久人人玩人妻潮喷内射人人| 诱受H嗯啊巨肉舍友1V1| 久久精品av| 18美女腿打开无遮软件| 免费看国产精品麻豆| 99久久精品一区二区三区| 欧洲馒头大肥p| 俄罗斯14一18处交| 无套暴躁白丝秘书| 荷兰少归BVBV| 中国女人hd| 欧美Av无码高清在线| 成年人在线视频免费观看| 少爷被多个暗卫肉高h| 国产亚洲精品视频在线网| 伊人精品在线| 欧美午夜精品A片一区二区HD| 第一次破女视频出血视频| 无码专区aaaaaa免费视频| 极品少妇高潮啪啪AV无码| 早乙女由依在线观看| 青青视频国产依人在线| 国产精品女上位在线观看| 益日韩欧群交P片内射中文|