傳感新品

【香港理工大學(xué)/華中科技大學(xué)：研發(fā)動(dòng)態(tài)視覺傳感器，實(shí)現(xiàn)低延時(shí)低功耗的運(yùn)動(dòng)識(shí)別】

近日，香港理工大學(xué)柴揚(yáng)和華中科技大學(xué)何毓輝教授造出一款動(dòng)態(tài)視覺傳感器，實(shí)現(xiàn)了高級(jí)別的動(dòng)態(tài)視覺處理。

本次研究結(jié)合了動(dòng)態(tài)視覺傳感器和傳感器內(nèi)計(jì)算，通過(guò)充分利用兩者的優(yōu)點(diǎn)，他們還設(shè)計(jì)出一款動(dòng)態(tài)傳感器內(nèi)計(jì)算架構(gòu)。該架構(gòu)可以大幅提高運(yùn)算效率，實(shí)現(xiàn)低延時(shí)、低功耗的運(yùn)動(dòng)識(shí)別。

（來(lái)源：Nature Electronics）

這種直接在傳感器內(nèi)進(jìn)行實(shí)時(shí)處理和決策的方式，有望用于邊緣計(jì)算，以及用于那些對(duì)延遲高度敏感的場(chǎng)景比如無(wú)人駕駛汽車、機(jī)器人技術(shù)等領(lǐng)域，并能有效節(jié)省通信帶寬，此外還能增強(qiáng)數(shù)據(jù)的安全性和隱私性。

那么，相比現(xiàn)有的圖像傳感器、或互補(bǔ)金屬氧化物半導(dǎo)體（CMOS，Complementary Metal Oxide Semiconductor），動(dòng)態(tài)視覺傳感器在捕捉動(dòng)態(tài)圖像時(shí)，在工作原理上有著哪些不同？

據(jù)了解，傳統(tǒng)相機(jī)所基于的標(biāo)準(zhǔn)圖像傳感器具有固定的幀率，不管像素點(diǎn)的光強(qiáng)是否發(fā)生變化，都會(huì)在每一幀記錄下所有像素的絕對(duì)光強(qiáng)，因此會(huì)包含大量冗余的視覺數(shù)據(jù)。

另一方面，較長(zhǎng)的曝光時(shí)間限制了事件捕獲的延遲，導(dǎo)致所捕捉到的高速運(yùn)動(dòng)物體圖像存在模糊和過(guò)曝等問題。

相比之下，受生物視網(wǎng)膜啟發(fā)的動(dòng)態(tài)視覺傳感器（DVS，Dynamic Vision Sensor），可以只針對(duì)場(chǎng)景中的相對(duì)變化區(qū)域作出反應(yīng)。

對(duì)于動(dòng)態(tài)視覺傳感器來(lái)說(shuō)，只有在像素點(diǎn)的位置發(fā)生光強(qiáng)變化的時(shí)候，才會(huì)產(chǎn)生脈沖信號(hào)從而生成稀疏數(shù)據(jù)，這樣一來(lái)就能大大減少數(shù)據(jù)的冗余量。

動(dòng)態(tài)視覺傳感器還具備超高的時(shí)間分辨率，能夠確保動(dòng)作信息被完整記錄下來(lái)。因此，它也能被用于檢測(cè)場(chǎng)景中的變化，輸出稀疏且重要的信息。

（來(lái)源：Nature Electronics）

而對(duì)于傳感器內(nèi)的脈沖信號(hào)來(lái)說(shuō)，它是否也能被反饋給傳感器神經(jīng)元，從而做出相應(yīng)的調(diào)整？

對(duì)于這一問題，答案是肯定的。為了執(zhí)行復(fù)雜的計(jì)算任務(wù)比如動(dòng)作識(shí)別，像素單元需要被擴(kuò)展到陣列級(jí)別，并通過(guò)單元之間合適的物理互連，構(gòu)建成脈沖神經(jīng)網(wǎng)絡(luò)（SNN，Spiking Neural Network）。

而每個(gè)子像素陣列，在連接之后可以輸出神經(jīng)元。在動(dòng)態(tài)場(chǎng)景中，當(dāng)像素點(diǎn)的光照強(qiáng)度發(fā)生變化時(shí)，子像素單元也會(huì)產(chǎn)生正負(fù)電流脈沖，來(lái)對(duì) LIF（leaky integrate and fire）神經(jīng)元中的電容進(jìn)行充放電。

一旦電容的積分電壓也就是神經(jīng)元的膜電位，達(dá)到神經(jīng)元的閾值時(shí)就會(huì)輸出脈沖。

傳感動(dòng)態(tài)

【因三星提高圖像傳感器價(jià)格，導(dǎo)致全球2024年旗艦手機(jī)價(jià)格或上漲 ？】

近日，外媒發(fā)文指出，三星提高了ISOCELL圖像傳感器的價(jià)格。這可能會(huì)提高2024年旗艦智能手機(jī)的價(jià)格，因?yàn)橄鄼C(jī)傳感器是手機(jī)中最昂貴的部件之一。與此同時(shí)，三星在該領(lǐng)域的競(jìng)爭(zhēng)對(duì)手索尼和豪威尚未宣布漲價(jià)。

三星抓住智能手機(jī)銷售增長(zhǎng)的機(jī)遇

智能手機(jī)攝像頭已成為過(guò)去十年中最重要的技術(shù)進(jìn)步之一，部分手機(jī)能夠進(jìn)行100倍數(shù)碼變焦和8K視頻錄制。雖然各家公司都在努力改善智能手機(jī)的拍照體驗(yàn)，但現(xiàn)在以攝像頭為核心賣點(diǎn)的旗艦機(jī)型可能會(huì)變得更加昂貴。主要原因在于，作為最大的相機(jī)圖像傳感器（CIS）制造商之一的三星，已經(jīng)提高了其組件的價(jià)格。

在過(guò)去幾年里，智能手機(jī)行業(yè)的發(fā)展速度有所放緩，從事零部件生產(chǎn)的制造商出現(xiàn)了庫(kù)存過(guò)剩的情況。三星是世界上最大的CMOS傳感器制造商之一，三星自己的手機(jī)和其他品牌的手機(jī)都使用這種傳感器。

據(jù)報(bào)道，隨著智能手機(jī)市場(chǎng)的緩慢增長(zhǎng)，三星已向手機(jī)制造商發(fā)出通知，要求將其成像傳感器的價(jià)格上調(diào)25%。新價(jià)格可能在2024年初生效。

旗艦手機(jī)可能在2024年變得更加昂貴

三星提高成像傳感器的價(jià)格將主要影響3200萬(wàn)像素及以上的傳感器，因?yàn)檫@些傳感器的制造更為復(fù)雜。然而，大多數(shù)旗艦智能手機(jī)都使用5000萬(wàn)像素以上的傳感器，這使得它們很容易受到三星漲價(jià)的影響。

這可能會(huì)迫使智能手機(jī)制造商提高高端智能手機(jī)的成本，因?yàn)檫@些傳感器是設(shè)備中價(jià)格昂貴的部件之一。

不過(guò)，三星并不是智能手機(jī)CIS的唯一供應(yīng)商。索尼和豪威是該領(lǐng)域的兩大競(jìng)爭(zhēng)對(duì)手。外媒分析稱，三星的漲價(jià)會(huì)帶來(lái)兩種可能。要么其競(jìng)爭(zhēng)對(duì)手繼續(xù)維持現(xiàn)有價(jià)格，吸引更多品牌向其靠攏；要么它們也采取同樣的策略，提高價(jià)格以增加收入。

智能手機(jī)廠商如何應(yīng)對(duì)這一局面將是一個(gè)有趣的問題。預(yù)測(cè)來(lái)看，旗艦機(jī)更有可能漲價(jià)，而高端和中端設(shè)備可能不得不在攝像頭上進(jìn)行妥協(xié)。

【OpenAI 仍堅(jiān)持售股計(jì)劃，并將多給員工一個(gè)月時(shí)間考慮是否參與】

12 月 1 日消息，據(jù)多位知情人士透露，人工智能初創(chuàng)公司 OpenAI 堅(jiān)持讓員工通過(guò)“要約收購(gòu)”出售公司股份的計(jì)劃，并多給他們 1 個(gè)月的時(shí)間來(lái)考慮是否出售所持股票。

知情人士曾在 10 月份表示，OpenAI 始終在就出售員工持股事宜與投資者進(jìn)行談判，這筆交易對(duì)該公司的估值為 860 億美元。但是，本月早些時(shí)候，在首席執(zhí)行官薩姆?阿爾特曼（Sam Altman）先被解雇后又迅速?gòu)?fù)職的動(dòng)蕩中，人們擔(dān)心售股可能不會(huì)按計(jì)劃進(jìn)行。

圖源 Pexels

一位了解談判情況的人士表示，在得知阿爾特曼被突然解雇后，許多投資者退出了收購(gòu)要約。但在阿爾特曼重新?lián)问紫瘓?zhí)行官后，投資者的需求和熱情被重新點(diǎn)燃，足以彌補(bǔ)部分投資者退出交易空出的份額。

知情人士還說(shuō)，鑒于最近發(fā)生的劇變，OpenAI 將多給員工一個(gè)月的時(shí)間，讓他們自行考慮是否繼續(xù)售股，截止日期延長(zhǎng)到 1 月 5 日。知情人士此前表示，此次售股原定于 12 月初結(jié)束。OpenAI 的代表拒絕置評(píng)。

860 億美元的估值使 OpenAI 躋身全球估值最高的初創(chuàng)公司之列。一年前，這家公司發(fā)布了聊天機(jī)器人 ChatGPT，引發(fā)了科技行業(yè)對(duì)人工智能的狂熱，成為硅谷最著名的人工智能初創(chuàng)公司。

少數(shù)人持股的公司經(jīng)常利用這樣的收購(gòu)要約，讓員工有機(jī)會(huì)在首次公開募股（IPO）之前釋放所持股份的價(jià)值，這也給了投資者搶購(gòu)更多股票的機(jī)會(huì)。

【AAC 瑞聲科技 X 軸線性馬達(dá)出貨量累積達(dá)到 10 億顆】

12 月 1 日消息，在今日下午的一加 × 瑞聲仿生振感馬達(dá) Turbo 發(fā)布會(huì)上，AAC 瑞聲科技宣布，其 X 軸線性馬達(dá)累計(jì)出貨量已經(jīng)超過(guò)了 10 億顆。

一加 12 手機(jī)將全球首發(fā)仿生振感馬達(dá) Turbo，號(hào)稱“可能是行業(yè)最強(qiáng)馬達(dá)”。

今年 8 月報(bào)道，一加宣布與瑞聲科技共同成立一加 & AAC 仿生觸感實(shí)驗(yàn)室，聯(lián)手打造更好的產(chǎn)品體驗(yàn)，共同推進(jìn)安卓陣營(yíng)的馬達(dá)仿生振動(dòng)生態(tài)從建立走向成熟。

【拜登政府被曝要求沙特撤資硅谷AI芯片企業(yè)，美監(jiān)管機(jī)構(gòu)堅(jiān)稱“維護(hù)國(guó)家安全”】

觀察者網(wǎng)消息，彭博社12月1日發(fā)文披露，美國(guó)政府已迫使沙特阿美旗下風(fēng)險(xiǎn)投資公司Prosperity7出售其在硅谷人工智能芯片初創(chuàng)公司Rain AI的股份，這家硅谷公司的投資人也包括Open AI創(chuàng)始人山姆·奧特曼。報(bào)道稱，被迫撤資可能會(huì)對(duì)沙特在美國(guó)技術(shù)行業(yè)不斷增加的投資造成廣泛的影響。

知情人士稱，Prosperity7曾在2022年作為主要投資者為Rain AI融資2500萬(wàn)美元。不過(guò)在美國(guó)外國(guó)投資委員會(huì)（CFIUS）審查后，Prosperity7出售了在Rain AI的股份。知情人士稱，CFIUS是美國(guó)處理投資領(lǐng)域國(guó)家安全問題的主要監(jiān)管機(jī)構(gòu)，在過(guò)去一年的某個(gè)時(shí)候指示沙特方面解除投資協(xié)議。

Rain AI由奧特曼提供部分資金，是一家受人腦工作方式啟發(fā)設(shè)計(jì)人工智能芯片的初創(chuàng)公司。數(shù)據(jù)公司PitchBook發(fā)現(xiàn)，Prosperity7將其在Rain AI公司的股份出售給了硅谷投資公司Grep VC。

奧特曼、Rain AI、Prosperity7和Grep VC均未回復(fù)置評(píng)請(qǐng)求。CFIUS在一份電子郵件聲明中表示，無(wú)法對(duì)正在審查的交易發(fā)表評(píng)論，但該機(jī)構(gòu)“致力于在其職權(quán)范圍內(nèi)采取一切必要行動(dòng)，保護(hù)美國(guó)國(guó)家安全”。

彭博社將此事與中國(guó)和沙特的關(guān)系聯(lián)系了起來(lái)。報(bào)道稱，中國(guó)正在尋求加強(qiáng)與中東的關(guān)系。11月，中國(guó)和沙特簽署了價(jià)值約70億美元的本幣互換協(xié)議，沙特阿美已向中國(guó)能源行業(yè)投資數(shù)十億美元，沙特也在吸引中國(guó)科技公司合作。

在這樣的背景下，Prosperity7的撤資引人注目，因?yàn)榘讓m正在努力遏制中國(guó)的技術(shù)優(yōu)勢(shì)，尤其是在事關(guān)人工智能等未來(lái)創(chuàng)新的半導(dǎo)體領(lǐng)域。CFIUS今年正在審查幾筆價(jià)值數(shù)十億美元的交易，理由是擔(dān)心這些交易可能會(huì)帶來(lái)國(guó)家安全風(fēng)險(xiǎn)，而美國(guó)日益加強(qiáng)對(duì)中東財(cái)富基金活動(dòng)的審查，也被視作針對(duì)那些與中國(guó)關(guān)系密切的實(shí)體。

值得注意的是，沙特近年來(lái)一直在積極布局人工智能領(lǐng)域。

2020年10月，沙特啟動(dòng)了一項(xiàng)國(guó)家人工智能戰(zhàn)略，旨在進(jìn)軍人工智能領(lǐng)域的全球領(lǐng)導(dǎo)者，沙特實(shí)施的數(shù)據(jù)與人工智能國(guó)家戰(zhàn)略（NSDAI）將力爭(zhēng)到2030年吸引200億美元的外國(guó)和本地投資。

英國(guó)《金融時(shí)報(bào)》今年8月又爆料，沙特與阿聯(lián)酋加入了全球人工智能軍備競(jìng)賽，這兩個(gè)海灣強(qiáng)國(guó)正在搶購(gòu)數(shù)千顆對(duì)構(gòu)建AI軟件至關(guān)重要的英偉達(dá)高性能芯片。報(bào)道稱，兩國(guó)曾表示，他們的目標(biāo)是成為AI領(lǐng)域的領(lǐng)導(dǎo)者，通過(guò)實(shí)施一個(gè)“野心勃勃”的計(jì)劃，推進(jìn)本國(guó)經(jīng)濟(jì)加速轉(zhuǎn)型發(fā)展。

阿拉伯《海灣時(shí)報(bào)》4月援引全球咨詢公司普華永道的預(yù)測(cè)報(bào)告稱，到2030年，人工智能有望占沙特GDP的12.4%。將為沙特經(jīng)濟(jì)貢獻(xiàn)1350億美元，使沙特成為中東地區(qū)該技術(shù)的最大受益者。

【人形機(jī)器人：從芯片到零部件國(guó)產(chǎn)化率超90%】

11月28日至29日，在央視新聞報(bào)道的視頻中，展廳中的一個(gè)人形機(jī)器人引起眾多網(wǎng)友關(guān)注。

11月30日，這個(gè)人形機(jī)器人，由傅利葉智能團(tuán)隊(duì)突破技術(shù)難關(guān)，實(shí)現(xiàn)全自主研發(fā)。目前，該機(jī)器人已小批量生產(chǎn)，技術(shù)攻關(guān)仍在繼續(xù)，其真正走進(jìn)大眾生活，還需要時(shí)間。

核心技術(shù)取得諸多突破

說(shuō)起自家機(jī)器人的“高光時(shí)刻”，傅利葉智能創(chuàng)始人兼首席執(zhí)行官顧捷記憶猶新。

當(dāng)天，顧捷和同事演示了機(jī)器人的行走，包括一些上肢的動(dòng)作。顧捷稱，傅利葉在核心技術(shù)方面有很多突破，比如說(shuō)機(jī)器人全身的運(yùn)動(dòng)控制。有了關(guān)節(jié)之后，機(jī)器人的力量才會(huì)比較大。再加上賦予人工智能大腦，它就能夠做一些非常復(fù)雜的任務(wù)。

“這個(gè)機(jī)器人未來(lái)能不能說(shuō)話，能做些什么事情。我說(shuō)，未來(lái)加上大語(yǔ)言模型，是完全可以實(shí)現(xiàn)的。”顧捷說(shuō)，他們的研發(fā)團(tuán)隊(duì)大多是年輕的工程師、科學(xué)家。

顧捷說(shuō)。此次展示的人形機(jī)器人，是該公司在今年世界人工智能大會(huì)上首發(fā)的通用機(jī)器人，目前已經(jīng)在做小批量量產(chǎn)。在推向市場(chǎng)之前，這款人形機(jī)器人在實(shí)驗(yàn)室已完成多次迭代，它現(xiàn)在的名字叫GR-1。

國(guó)產(chǎn)化率超過(guò)90%

“這臺(tái)人形機(jī)器人完全由我們自主研發(fā)。我們的供應(yīng)鏈現(xiàn)在都自主可控，從芯片到零部件，它的國(guó)產(chǎn)化率已經(jīng)超過(guò)90%。”顧捷說(shuō)道。

公開資料顯示， GR-1身高1.65米，體重55公斤，全身最多可達(dá)54個(gè)自由度。因?yàn)檫@款機(jī)器人有高度仿生的軀干構(gòu)型、擬人的運(yùn)動(dòng)控制，結(jié)合認(rèn)知智能，能夠與人協(xié)同完成動(dòng)作，在工業(yè)、康復(fù)、居家、科研等多應(yīng)用場(chǎng)景潛能巨大，意味著國(guó)產(chǎn)機(jī)器人正式邁向了具身智能新時(shí)代。

為了GR-1的“誕生”，傅利葉智能準(zhǔn)備了八年。“傅利葉最早做康復(fù)類機(jī)器人，便已經(jīng)有了初步的人形形態(tài)。再后來(lái)，我們發(fā)現(xiàn)如果加上人工智能，人形機(jī)器人可以做很多任務(wù)。”說(shuō)起人形機(jī)器人的應(yīng)用場(chǎng)景，顧捷分析，剛開始可能用于一些危險(xiǎn)的地方幫助人們工作，比如核電站作業(yè)，或者一些野外危險(xiǎn)性環(huán)境。其后可以再幫助人類干一些枯燥的工作。等它泛化到一定的程度之后，可以幫我們做家務(wù)，甚至成為我們身邊的好伙伴。

“全世界做了二三十年的機(jī)器人，還沒有公司能夠大批量制造人形機(jī)器人，因?yàn)橛泻芏喙?yīng)鏈壁壘、核心技術(shù)需要去突破，但我們已經(jīng)看到了商業(yè)化的曙光。隨著首款機(jī)器人的發(fā)布、小批量的生產(chǎn)，我們計(jì)劃在明年實(shí)現(xiàn)量產(chǎn)并達(dá)到數(shù)百甚至上千臺(tái)，讓更多人形機(jī)器人走進(jìn)各類應(yīng)用場(chǎng)景中。”顧捷說(shuō)道。

11月30日，工作人員在調(diào)試GR-1人形機(jī)器人。澎湃新聞 鄒娟 圖

真正走進(jìn)生活還需時(shí)間

當(dāng)然，作為一個(gè)跨學(xué)科領(lǐng)域，人形機(jī)器人要真正進(jìn)入生活，需要突破更多核心關(guān)鍵技術(shù)。

顧捷分析，機(jī)器人就像人一樣，需要很好的大腦、小腦、身體。GR-1的研發(fā)目前相對(duì)聚焦在身體跟小腦上，“小腦的部分，控制肢體動(dòng)作的協(xié)調(diào)和平衡等。我們想先把人形機(jī)器人做到可用，運(yùn)動(dòng)能力好”。

“大腦的部分也就是AI的大模型。原來(lái)的機(jī)器人開發(fā)，最難的就是每個(gè)動(dòng)作都是預(yù)先設(shè)定好的，但如果加上AI，他會(huì)實(shí)時(shí)動(dòng)作且有推理能力，可以執(zhí)行很多復(fù)雜任務(wù)。”顧捷認(rèn)為，未來(lái)智能機(jī)器人和AI的結(jié)合是必然的，這也是機(jī)器人發(fā)展史上尤其關(guān)鍵的一點(diǎn)。

“就像20年前，大家不會(huì)想到現(xiàn)在的手機(jī)就是一塊觸摸屏。人形機(jī)器人會(huì)發(fā)展成什么樣，沒人知道。但可以肯定的是，未來(lái)的人形機(jī)器人不但會(huì)有視覺和聽覺，還可能會(huì)有觸覺，這些感官的數(shù)據(jù)要融合在一起做訓(xùn)練，才能夠得出比較好的解決方案。泛化和訓(xùn)練的過(guò)程需要大量人員投入，也需要時(shí)間。”顧捷說(shuō)道。

審核編輯 黃宇