近日，SynSense時識科技與蘇黎世聯(lián)邦理工學院聯(lián)合研究成果在2024 CVPR Workshop發(fā)布。該研究是—項基于“感算一體”動態(tài)視覺智能SoC Speck的超低功耗眼動追蹤技術，結果顯示端到端系統(tǒng)功耗低至2.89mW，延遲僅5.57ms。

該成果憑借卓越的性能受到學術及產(chǎn)業(yè)界的廣泛關注。這項研究成果不僅為低功耗、高性能的眼動追蹤技術設定了新標準，也為類腦智能技術在智能和可穿戴設備中的應用帶來了革命性進展。

研究團隊在眼鏡上搭載了兩臺來自iniVation的DVXplorer事件相機（圖1左）作為數(shù)據(jù)采集硬件。從數(shù)名志愿者處收集了大量數(shù)據(jù)，形成了名為“Ini-30“的基于事件的眼動追蹤數(shù)據(jù)集。為研究提供了豐富且真實的眼動信息。

圖1. 數(shù)據(jù)收集硬件（左）及視頻記錄示例（右）

研究團隊發(fā)明了名為"Retina"的SNN模型，它基于Integrate And Fire（IAF）神經(jīng)元構建。在64x64 DVS輸入條件下，Retina實現(xiàn)了僅3.24像素的瞳孔跟蹤誤差，顯示出極高的追蹤精度。與最新的基于事件的眼動追蹤方法"3ET"相比，Retina在Ini-30數(shù)據(jù)集上更為精確，并顯著減少了模型的計算復雜度，MAC運算減少了35倍。

通過在Speck上部署Retina模型，結果顯示端到端功耗在2.89-4.8mW，延遲僅為5.57-8.01ms（圖2）。研究結果不僅證明了模型的高效性，同時也再次展示了Speck在處理此類任務時功耗與實效性的巨大優(yōu)勢。可點擊閱讀原文查看文章。

圖2. Speck運行眼動追蹤算法的性能數(shù)據(jù)

SynSense時識科技一直堅持技術創(chuàng)新，此項研究成果不僅在理論上具有創(chuàng)新性獲得了學術認可，更在實際應用中展現(xiàn)出了巨大的潛力。

憑借類腦智能技術低功耗、低延遲且支持高追蹤精度等特點，SynSense時識科技將攜手更多合作伙伴推動眼動追蹤技術向更高效、更精準的方向跨越式邁進。引領智能設備如手機、XR/VR等領域的技術新變革，為用戶帶來更加自然、高效的交互體驗。

關于SynSense時識科技

SynSense時識科技（原名aiCTX）創(chuàng)立于2017年，是全球領先的類腦智能與應用解決方案提供商。

SynSense時識科技專注類腦智能的研究與開發(fā)，以蘇黎世大學和蘇黎世聯(lián)邦理工學院20+年全球領先的研發(fā)經(jīng)驗和技術積累為基石，聚焦邊緣計算應用場景，提供橫跨感知與計算的類腦智能應用與解決方案。

SynSense時識科技率先實現(xiàn)了類腦芯片商業(yè)化應用零的突破，為人工智能向認知智能發(fā)展，萬物互聯(lián)向萬物智聯(lián)發(fā)展邁出了關鍵一步。SynSense將和伙伴一起，共同構建“端到芯”“物與物”“物與人”萬物智聯(lián)的認知生態(tài)，引領全球類腦智能應用與發(fā)展，為人類未來美好生活創(chuàng)造福祉。