基于上下文關聯(lián)的多模態(tài)信息融合方法研究.pdf

1、互聯(lián)網(wǎng)上聚集了海量的圖文聲像等各種類型的信息資源，它們具有實時的或者非實時的、確定的或者模糊的、互補的或者互斥的不同特征，這些特征要求信息服務系統(tǒng)為用戶提供多模態(tài)信息以滿足用戶的信息要求。然而多模態(tài)信息的表達方式多樣，關系復雜，若孤立對待則可能造成信息資源的浪費，因此有必要對這些信息進行融合，從而為用戶提供更為豐富準確的信息?，F(xiàn)有的信息融合技術充分利用了多源信息的互補性和增益性，提高了信息處理的質量，但是對于當前互聯(lián)網(wǎng)環(huán)境下的多模態(tài)信息

2、集成服務而言，已有的信息融合技術存在一定的局限性:無法有效融合多模態(tài)信息中的多態(tài)語義;難以實現(xiàn)多模態(tài)信息融合中所需的協(xié)同性要求。
　　本文借助高層語義的指導性以及多模態(tài)信息環(huán)境的上下文信息，通過協(xié)作學習方法建立多模態(tài)聯(lián)合特征表示與聯(lián)合空間，實現(xiàn)多模態(tài)信息特征層次融合和決策層次融合。
　　文章研究的主要內容如下:
　　第一章是緒論，主要介紹了多模態(tài)信息融合的研究背景及意義，信息融合的國內外發(fā)展狀況和本文的主要研究內容。<

3、br>　　第二章的研究內容為上下文信息，關聯(lián)分析，信息融合中關聯(lián)方法的研究與發(fā)展，以及融合進程中上下文信息的使用分析。
　　第三章結合相關文獻著作比較分析了多模態(tài)信息融合方法。
　　第四章的研究內容為特征層次多模態(tài)信息融合過程，融合方法及其應用。
　　第五章的研究內容為決策層次多模態(tài)信息融合過程，融合方法及其應用。
　　第六章的研究內容為混合層次多模態(tài)信息融合過程，融合方法及其應用。
　　第七章為本文的總結