新華社北京5月30日電（記者宋晨）清華大學(xué)類(lèi)腦計算研究中心團隊近日研制出了世界首款類(lèi)腦互補視覺(jué)芯片“天眸芯”，相關(guān)成果30日作為封面文章，發(fā)表于國際學(xué)術(shù)期刊《自然》。
圖為“天眸芯”。（清華大學(xué)精密儀器系供圖）
論文通訊作者、清華大學(xué)精密儀器系教授施路平介紹，在開(kāi)放世界中，智能系統不僅要應對龐大的數據量，還需要應對如駕駛場(chǎng)景中的突發(fā)危險、隧道口的劇烈光線(xiàn)變化和夜間強閃光干擾等極端事件。而傳統視覺(jué)感知芯片面對此類(lèi)場(chǎng)景往往出現失真、失效或高延遲，限制系統的穩定性和安全性。
為更好應對上述問(wèn)題，清華大學(xué)類(lèi)腦計算研究中心團隊聚焦類(lèi)腦視覺(jué)感知芯片技術(shù)，提出了一種基于視覺(jué)原語(yǔ)的互補雙通路類(lèi)腦視覺(jué)感知新范式。
“該范式借鑒了人類(lèi)視覺(jué)系統的基本原理，將開(kāi)放世界的視覺(jué)信息拆解為基于視覺(jué)原語(yǔ)的信息表示，并通過(guò)有機組合這些原語(yǔ)，模仿人視覺(jué)系統的特征，形成兩條優(yōu)勢互補、信息完備的視覺(jué)感知通路?！笔┞菲秸f(shuō)。
基于這一新范式，團隊進(jìn)一步研制出了世界首款類(lèi)腦互補視覺(jué)芯片“天眸芯”，在極低的帶寬和功耗代價(jià)下，實(shí)現了高速、高精度、高動(dòng)態(tài)范圍的視覺(jué)信息采集，能夠高效應對各種極端場(chǎng)景，確保系統的穩定性和安全性。
同時(shí)，基于“天眸芯”，團隊還自主研發(fā)了高性能軟件和算法，并在開(kāi)放環(huán)境車(chē)載平臺上進(jìn)行了性能驗證。在多種極端場(chǎng)景下，該系統實(shí)現了低延遲、高性能的實(shí)時(shí)感知推理，展現了其在智能無(wú)人系統領(lǐng)域的應用潛力。
論文通訊作者、清華大學(xué)精密儀器系教授趙蓉表示，“天眸芯”為自動(dòng)駕駛、具身智能等重要應用開(kāi)辟了新的道路。結合團隊在類(lèi)腦計算芯片“天機芯”、類(lèi)腦軟件工具鏈和類(lèi)腦機器人方面的應用落地的技術(shù)積累，“天眸芯”的加入將能夠進(jìn)一步完善類(lèi)腦智能生態(tài)，有力推動(dòng)人工通用智能的發(fā)展。
據介紹，這是該團隊繼異構融合類(lèi)腦計算“天機芯”后，第二次登上《自然》封面，標志著(zhù)在類(lèi)腦計算和類(lèi)腦感知兩個(gè)方向上均取得了基礎性突破。
現實(shí)世界的多樣性、動(dòng)態(tài)性和不可預測性對圖像傳感器提出了挑戰。在本周的期刊中，石路平及其同事展示了一款受人類(lèi)視覺(jué)系統啟發(fā)的視覺(jué)芯片。這款名為 Tianmouc 的芯片將視覺(jué)信息解析為原始表示，然后使用兩條互補的視覺(jué)通路（一條用于認知相關(guān)處理，一條用于動(dòng)作相關(guān)處理）來(lái)解析這些表示以理解場(chǎng)景。認知處理以高空間分辨率處理顏色和強度，而——
封面圖片：清華大學(xué)
