中科院自動化所類腦信息處理研究獲進展

中國科學院自動化研究所的研究人員借鑒生物神經結構、認知機制與學習特性，在“視聽模態的生成、融合”，以及“智能體之間的知識遷移”方面取得了重大突破。在“視聽模態的融合”問題中，研究人員提出了有效將聽覺信息融合在視頻描述生成框架中的特征融合策略，獲得了理想效果；在“視聽模態的生成”問題中，研究人員提出了一個跨模態循環對抗生成網絡、一個聯合對應對抗損失函數和一個動態多模態分類網絡，構建出了更有效的視聽跨模態相互生成模型；在“智能體之間的知識遷移”問題中，研究人員將一種新類型的知識——交叉樣本相似性引入到深度度量學習中，將知識形式化成一個教師和學生網絡間的排序匹配問題，將經典的基于列的學習轉換成排序學習算法，大幅提高了學生網絡的性能，也可獲得較傳統方法更好的遷移性能。 (程 博)