傳感新品

【香港理工大學(xué)/華中科技大學(xué)：研發(fā)動態(tài)視覺傳感器，實現(xiàn)低延時低功耗的運動識別】

近日，香港理工大學(xué)柴揚和華中科技大學(xué)何毓輝教授造出一款動態(tài)視覺傳感器，實現(xiàn)了高級別的動態(tài)視覺處理。

本次研究結(jié)合了動態(tài)視覺傳感器和傳感器內(nèi)計算，通過充分利用兩者的優(yōu)點，他們還設(shè)計出一款動態(tài)傳感器內(nèi)計算架構(gòu)。該架構(gòu)可以大幅提高運算效率，實現(xiàn)低延時、低功耗的運動識別。

（來源：Nature Electronics）

這種直接在傳感器內(nèi)進(jìn)行實時處理和決策的方式，有望用于邊緣計算，以及用于那些對延遲高度敏感的場景比如無人駕駛汽車、機器人技術(shù)等領(lǐng)域，并能有效節(jié)省通信帶寬，此外還能增強數(shù)據(jù)的安全性和隱私性。

那么，相比現(xiàn)有的圖像傳感器、或互補金屬氧化物半導(dǎo)體（CMOS，Complementary Metal Oxide Semiconductor），動態(tài)視覺傳感器在捕捉動態(tài)圖像時，在工作原理上有著哪些不同？

據(jù)了解，傳統(tǒng)相機所基于的標(biāo)準(zhǔn)圖像傳感器具有固定的幀率，不管像素點的光強是否發(fā)生變化，都會在每一幀記錄下所有像素的絕對光強，因此會包含大量冗余的視覺數(shù)據(jù)。

另一方面，較長的曝光時間限制了事件捕獲的延遲，導(dǎo)致所捕捉到的高速運動物體圖像存在模糊和過曝等問題。

相比之下，受生物視網(wǎng)膜啟發(fā)的動態(tài)視覺傳感器（DVS，Dynamic Vision Sensor），可以只針對場景中的相對變化區(qū)域作出反應(yīng)。

對于動態(tài)視覺傳感器來說，只有在像素點的位置發(fā)生光強變化的時候，才會產(chǎn)生脈沖信號從而生成稀疏數(shù)據(jù)，這樣一來就能大大減少數(shù)據(jù)的冗余量。

動態(tài)視覺傳感器還具備超高的時間分辨率，能夠確保動作信息被完整記錄下來。因此，它也能被用于檢測場景中的變化，輸出稀疏且重要的信息。

（來源：Nature Electronics）

而對于傳感器內(nèi)的脈沖信號來說，它是否也能被反饋給傳感器神經(jīng)元，從而做出相應(yīng)的調(diào)整？

對于這一問題，答案是肯定的。為了執(zhí)行復(fù)雜的計算任務(wù)比如動作識別，像素單元需要被擴展到陣列級別，并通過單元之間合適的物理互連，構(gòu)建成脈沖神經(jīng)網(wǎng)絡(luò)（SNN，Spiking Neural Network）。

而每個子像素陣列，在連接之后可以輸出神經(jīng)元。在動態(tài)場景中，當(dāng)像素點的光照強度發(fā)生變化時，子像素單元也會產(chǎn)生正負(fù)電流脈沖，來對 LIF（leaky integrate and fire）神經(jīng)元中的電容進(jìn)行充放電。

一旦電容的積分電壓也就是神經(jīng)元的膜電位，達(dá)到神經(jīng)元的閾值時就會輸出脈沖。

傳感動態(tài)

【因三星提高圖像傳感器價格，導(dǎo)致全球2024年旗艦手機價格或上漲 ？】

近日，外媒發(fā)文指出，三星提高了ISOCELL圖像傳感器的價格。這可能會提高2024年旗艦智能手機的價格，因為相機傳感器是手機中最昂貴的部件之一。與此同時，三星在該領(lǐng)域的競爭對手索尼和豪威尚未宣布漲價。

三星抓住智能手機銷售增長的機遇

智能手機攝像頭已成為過去十年中最重要的技術(shù)進(jìn)步之一，部分手機能夠進(jìn)行100倍數(shù)碼變焦和8K視頻錄制。雖然各家公司都在努力改善智能手機的拍照體驗，但現(xiàn)在以攝像頭為核心賣點的旗艦機型可能會變得更加昂貴。主要原因在于，作為最大的相機圖像傳感器（CIS）制造商之一的三星，已經(jīng)提高了其組件的價格。

在過去幾年里，智能手機行業(yè)的發(fā)展速度有所放緩，從事零部件生產(chǎn)的制造商出現(xiàn)了庫存過剩的情況。三星是世界上最大的CMOS傳感器制造商之一，三星自己的手機和其他品牌的手機都使用這種傳感器。

據(jù)報道，隨著智能手機市場的緩慢增長，三星已向手機制造商發(fā)出通知，要求將其成像傳感器的價格上調(diào)25%。新價格可能在2024年初生效。

旗艦手機可能在2024年變得更加昂貴

三星提高成像傳感器的價格將主要影響3200萬像素及以上的傳感器，因為這些傳感器的制造更為復(fù)雜。然而，大多數(shù)旗艦智能手機都使用5000萬像素以上的傳感器，這使得它們很容易受到三星漲價的影響。

這可能會迫使智能手機制造商提高高端智能手機的成本，因為這些傳感器是設(shè)備中價格昂貴的部件之一。

不過，三星并不是智能手機CIS的唯一供應(yīng)商。索尼和豪威是該領(lǐng)域的兩大競爭對手。外媒分析稱，三星的漲價會帶來兩種可能。要么其競爭對手繼續(xù)維持現(xiàn)有價格，吸引更多品牌向其靠攏；要么它們也采取同樣的策略，提高價格以增加收入。

智能手機廠商如何應(yīng)對這一局面將是一個有趣的問題。預(yù)測來看，旗艦機更有可能漲價，而高端和中端設(shè)備可能不得不在攝像頭上進(jìn)行妥協(xié)。

【OpenAI 仍堅持售股計劃，并將多給員工一個月時間考慮是否參與】

12 月 1 日消息，據(jù)多位知情人士透露，人工智能初創(chuàng)公司 OpenAI 堅持讓員工通過“要約收購”出售公司股份的計劃，并多給他們 1 個月的時間來考慮是否出售所持股票。

知情人士曾在 10 月份表示，OpenAI 始終在就出售員工持股事宜與投資者進(jìn)行談判，這筆交易對該公司的估值為 860 億美元。但是，本月早些時候，在首席執(zhí)行官薩姆?阿爾特曼（Sam Altman）先被解雇后又迅速復(fù)職的動蕩中，人們擔(dān)心售股可能不會按計劃進(jìn)行。

圖源 Pexels

一位了解談判情況的人士表示，在得知阿爾特曼被突然解雇后，許多投資者退出了收購要約。但在阿爾特曼重新?lián)问紫瘓?zhí)行官后，投資者的需求和熱情被重新點燃，足以彌補部分投資者退出交易空出的份額。

知情人士還說，鑒于最近發(fā)生的劇變，OpenAI 將多給員工一個月的時間，讓他們自行考慮是否繼續(xù)售股，截止日期延長到 1 月 5 日。知情人士此前表示，此次售股原定于 12 月初結(jié)束。OpenAI 的代表拒絕置評。

860 億美元的估值使 OpenAI 躋身全球估值最高的初創(chuàng)公司之列。一年前，這家公司發(fā)布了聊天機器人 ChatGPT，引發(fā)了科技行業(yè)對人工智能的狂熱，成為硅谷最著名的人工智能初創(chuàng)公司。

少數(shù)人持股的公司經(jīng)常利用這樣的收購要約，讓員工有機會在首次公開募股（IPO）之前釋放所持股份的價值，這也給了投資者搶購更多股票的機會。

【AAC 瑞聲科技 X 軸線性馬達(dá)出貨量累積達(dá)到 10 億顆】

12 月 1 日消息，在今日下午的一加 × 瑞聲仿生振感馬達(dá) Turbo 發(fā)布會上，AAC 瑞聲科技宣布，其 X 軸線性馬達(dá)累計出貨量已經(jīng)超過了 10 億顆。

一加 12 手機將全球首發(fā)仿生振感馬達(dá) Turbo，號稱“可能是行業(yè)最強馬達(dá)”。

今年 8 月報道，一加宣布與瑞聲科技共同成立一加 & AAC 仿生觸感實驗室，聯(lián)手打造更好的產(chǎn)品體驗，共同推進(jìn)安卓陣營的馬達(dá)仿生振動生態(tài)從建立走向成熟。

【拜登政府被曝要求沙特撤資硅谷AI芯片企業(yè)，美監(jiān)管機構(gòu)堅稱“維護(hù)國家安全”】

觀察者網(wǎng)消息，彭博社12月1日發(fā)文披露，美國政府已迫使沙特阿美旗下風(fēng)險投資公司Prosperity7出售其在硅谷人工智能芯片初創(chuàng)公司Rain AI的股份，這家硅谷公司的投資人也包括Open AI創(chuàng)始人山姆·奧特曼。報道稱，被迫撤資可能會對沙特在美國技術(shù)行業(yè)不斷增加的投資造成廣泛的影響。

知情人士稱，Prosperity7曾在2022年作為主要投資者為Rain AI融資2500萬美元。不過在美國外國投資委員會（CFIUS）審查后，Prosperity7出售了在Rain AI的股份。知情人士稱，CFIUS是美國處理投資領(lǐng)域國家安全問題的主要監(jiān)管機構(gòu)，在過去一年的某個時候指示沙特方面解除投資協(xié)議。

Rain AI由奧特曼提供部分資金，是一家受人腦工作方式啟發(fā)設(shè)計人工智能芯片的初創(chuàng)公司。數(shù)據(jù)公司PitchBook發(fā)現(xiàn)，Prosperity7將其在Rain AI公司的股份出售給了硅谷投資公司Grep VC。

奧特曼、Rain AI、Prosperity7和Grep VC均未回復(fù)置評請求。CFIUS在一份電子郵件聲明中表示，無法對正在審查的交易發(fā)表評論，但該機構(gòu)“致力于在其職權(quán)范圍內(nèi)采取一切必要行動，保護(hù)美國國家安全”。

彭博社將此事與中國和沙特的關(guān)系聯(lián)系了起來。報道稱，中國正在尋求加強與中東的關(guān)系。11月，中國和沙特簽署了價值約70億美元的本幣互換協(xié)議，沙特阿美已向中國能源行業(yè)投資數(shù)十億美元，沙特也在吸引中國科技公司合作。

在這樣的背景下，Prosperity7的撤資引人注目，因為白宮正在努力遏制中國的技術(shù)優(yōu)勢，尤其是在事關(guān)人工智能等未來創(chuàng)新的半導(dǎo)體領(lǐng)域。CFIUS今年正在審查幾筆價值數(shù)十億美元的交易，理由是擔(dān)心這些交易可能會帶來國家安全風(fēng)險，而美國日益加強對中東財富基金活動的審查，也被視作針對那些與中國關(guān)系密切的實體。

值得注意的是，沙特近年來一直在積極布局人工智能領(lǐng)域。

2020年10月，沙特啟動了一項國家人工智能戰(zhàn)略，旨在進(jìn)軍人工智能領(lǐng)域的全球領(lǐng)導(dǎo)者，沙特實施的數(shù)據(jù)與人工智能國家戰(zhàn)略（NSDAI）將力爭到2030年吸引200億美元的外國和本地投資。

英國《金融時報》今年8月又爆料，沙特與阿聯(lián)酋加入了全球人工智能軍備競賽，這兩個海灣強國正在搶購數(shù)千顆對構(gòu)建AI軟件至關(guān)重要的英偉達(dá)高性能芯片。報道稱，兩國曾表示，他們的目標(biāo)是成為AI領(lǐng)域的領(lǐng)導(dǎo)者，通過實施一個“野心勃勃”的計劃，推進(jìn)本國經(jīng)濟(jì)加速轉(zhuǎn)型發(fā)展。

阿拉伯《海灣時報》4月援引全球咨詢公司普華永道的預(yù)測報告稱，到2030年，人工智能有望占沙特GDP的12.4%。將為沙特經(jīng)濟(jì)貢獻(xiàn)1350億美元，使沙特成為中東地區(qū)該技術(shù)的最大受益者。

【人形機器人：從芯片到零部件國產(chǎn)化率超90%】

11月28日至29日，在央視新聞報道的視頻中，展廳中的一個人形機器人引起眾多網(wǎng)友關(guān)注。

11月30日，這個人形機器人，由傅利葉智能團(tuán)隊突破技術(shù)難關(guān)，實現(xiàn)全自主研發(fā)。目前，該機器人已小批量生產(chǎn)，技術(shù)攻關(guān)仍在繼續(xù)，其真正走進(jìn)大眾生活，還需要時間。

核心技術(shù)取得諸多突破

說起自家機器人的“高光時刻”，傅利葉智能創(chuàng)始人兼首席執(zhí)行官顧捷記憶猶新。

當(dāng)天，顧捷和同事演示了機器人的行走，包括一些上肢的動作。顧捷稱，傅利葉在核心技術(shù)方面有很多突破，比如說機器人全身的運動控制。有了關(guān)節(jié)之后，機器人的力量才會比較大。再加上賦予人工智能大腦，它就能夠做一些非常復(fù)雜的任務(wù)。

“這個機器人未來能不能說話，能做些什么事情。我說，未來加上大語言模型，是完全可以實現(xiàn)的。”顧捷說，他們的研發(fā)團(tuán)隊大多是年輕的工程師、科學(xué)家。

顧捷說。此次展示的人形機器人，是該公司在今年世界人工智能大會上首發(fā)的通用機器人，目前已經(jīng)在做小批量量產(chǎn)。在推向市場之前，這款人形機器人在實驗室已完成多次迭代，它現(xiàn)在的名字叫GR-1。

國產(chǎn)化率超過90%

“這臺人形機器人完全由我們自主研發(fā)。我們的供應(yīng)鏈現(xiàn)在都自主可控，從芯片到零部件，它的國產(chǎn)化率已經(jīng)超過90%。”顧捷說道。

公開資料顯示， GR-1身高1.65米，體重55公斤，全身最多可達(dá)54個自由度。因為這款機器人有高度仿生的軀干構(gòu)型、擬人的運動控制，結(jié)合認(rèn)知智能，能夠與人協(xié)同完成動作，在工業(yè)、康復(fù)、居家、科研等多應(yīng)用場景潛能巨大，意味著國產(chǎn)機器人正式邁向了具身智能新時代。

為了GR-1的“誕生”，傅利葉智能準(zhǔn)備了八年。“傅利葉最早做康復(fù)類機器人，便已經(jīng)有了初步的人形形態(tài)。再后來，我們發(fā)現(xiàn)如果加上人工智能，人形機器人可以做很多任務(wù)。”說起人形機器人的應(yīng)用場景，顧捷分析，剛開始可能用于一些危險的地方幫助人們工作，比如核電站作業(yè)，或者一些野外危險性環(huán)境。其后可以再幫助人類干一些枯燥的工作。等它泛化到一定的程度之后，可以幫我們做家務(wù)，甚至成為我們身邊的好伙伴。

“全世界做了二三十年的機器人，還沒有公司能夠大批量制造人形機器人，因為有很多供應(yīng)鏈壁壘、核心技術(shù)需要去突破，但我們已經(jīng)看到了商業(yè)化的曙光。隨著首款機器人的發(fā)布、小批量的生產(chǎn)，我們計劃在明年實現(xiàn)量產(chǎn)并達(dá)到數(shù)百甚至上千臺，讓更多人形機器人走進(jìn)各類應(yīng)用場景中。”顧捷說道。

11月30日，工作人員在調(diào)試GR-1人形機器人。澎湃新聞 鄒娟 圖

真正走進(jìn)生活還需時間

當(dāng)然，作為一個跨學(xué)科領(lǐng)域，人形機器人要真正進(jìn)入生活，需要突破更多核心關(guān)鍵技術(shù)。

顧捷分析，機器人就像人一樣，需要很好的大腦、小腦、身體。GR-1的研發(fā)目前相對聚焦在身體跟小腦上，“小腦的部分，控制肢體動作的協(xié)調(diào)和平衡等。我們想先把人形機器人做到可用，運動能力好”。

“大腦的部分也就是AI的大模型。原來的機器人開發(fā)，最難的就是每個動作都是預(yù)先設(shè)定好的，但如果加上AI，他會實時動作且有推理能力，可以執(zhí)行很多復(fù)雜任務(wù)。”顧捷認(rèn)為，未來智能機器人和AI的結(jié)合是必然的，這也是機器人發(fā)展史上尤其關(guān)鍵的一點。

“就像20年前，大家不會想到現(xiàn)在的手機就是一塊觸摸屏。人形機器人會發(fā)展成什么樣，沒人知道。但可以肯定的是，未來的人形機器人不但會有視覺和聽覺，還可能會有觸覺，這些感官的數(shù)據(jù)要融合在一起做訓(xùn)練，才能夠得出比較好的解決方案。泛化和訓(xùn)練的過程需要大量人員投入，也需要時間。”顧捷說道。

審核編輯 黃宇