◎ 科技日?qǐng)?bào)記者 華凌
近日，清華大學(xué)精密儀器系類腦計(jì)算研究團(tuán)隊(duì)研制出世界首款類腦互補(bǔ)視覺芯片“天眸芯”。該成果刊登在5月30日《自然》雜志封面。這是該團(tuán)隊(duì)繼異構(gòu)融合類腦計(jì)算“天機(jī)芯”后，第二次登上《自然》雜志封面，標(biāo)志著我國在類腦計(jì)算和類腦感知兩個(gè)重要方向上均取得基礎(chǔ)性突破。
2024年5月30日《自然》雜志封面。圖片來源：《自然》雜志網(wǎng)站
研究團(tuán)隊(duì)聚焦類腦視覺感知芯片技術(shù)，提出一種基于視覺原語的互補(bǔ)雙通路類腦視覺感知新范式——借鑒人類視覺系統(tǒng)的基本原理，將開放世界的視覺信息拆解為基于視覺原語的信息表示，并通過有機(jī)組合這些原語，模仿人視覺系統(tǒng)的特征，形成兩條優(yōu)勢(shì)互補(bǔ)、信息完備的視覺感知通路。
在此基礎(chǔ)上，團(tuán)隊(duì)研制出世界首款類腦互補(bǔ)視覺芯片“天眸芯”，在極低的帶寬（降低90%）和功耗代價(jià)下，實(shí)現(xiàn)每秒10000幀的高速、10bit的高精度、130dB的高動(dòng)態(tài)范圍的視覺信息采集，不僅突破傳統(tǒng)視覺感知范式的性能瓶頸，而且能夠高效應(yīng)對(duì)各種極端場景，確保系統(tǒng)的穩(wěn)定性和安全性。
類腦互補(bǔ)視覺芯片“天眸芯”。圖片來源：清華大學(xué)
基于“天眸芯”，團(tuán)隊(duì)還自主研發(fā)高性能軟件和算法，并在開放環(huán)境車載平臺(tái)上進(jìn)行性能驗(yàn)證。在多種極端場景下，該系統(tǒng)實(shí)現(xiàn)低延遲、高性能的實(shí)時(shí)感知推理，展現(xiàn)其在智能無人系統(tǒng)領(lǐng)域的巨大應(yīng)用潛力。