近年來，隨著我國政治、經濟、文化與社會活動日趨活躍，大型活動已經成為促進經濟發展和文化交流的重要載體，對大型的群體活動的有效監控成為城市管理必不可少的一部分。本課題利用流體動力學和因果關聯性分析的相關理論，對多源大尺度群體監控問題進行研究，揭示多源大尺度群體事件的演化規律。提出了基于視頻結構特性分析的時空域特征提取算法、人群行為異常感知及因果事態推演建模分析、實現不同尺度群體的密度、分布及運動結構重要特征描述及異常行為的快速高效感知。課題研究期間，共發表主要期刊論文7篇，國際會議8篇（獲得1篇最佳會議論文獎），申請國家發明專利9項（已授權2項），培養博士研究生3人，碩士研究生4人。結合實際城市公共安全圖像監控系統的實戰應用，在上海市公安局搭建了高清圖像監控基于多源監控視頻大尺度群體異常行為感知系統演示平臺，并設計有效的針對人群分析的半自動基礎數據標注系統。本課題對提高我國群體性事件的防控能力，實現城市公共安全智能化、信息化管理具有重要的理論意義和現實意義。

近年來，隨著我國政治、經濟、文化與社會活動日趨活躍，大型活動已經成為促進經濟發展和文化交流的重要載體，對大型的群體活動的有效監控成為城市管理必不可少的一部分。針對大尺度人群監控問題中群體規模大、事件范圍大、時間跨度大的特點，本項目結合本學科的發展趨勢和申請者相關的工作基礎，通過匯聚流體力學、機器學習和計算機視覺領域的應用和理論拓展的研究成果，利用拉格朗日粒子動力學和因果關聯性分析的相關理論，對多源大尺度群體監控問題進行研究，揭示多源大尺度群體事件的演化規律，提出相應的群體行為分析模型，實現擁擠群體的異常行為的快速高效感知。本項研究將形成一套完整的研究方案及相關技術路線，以期望對大尺度群體的智能視覺感知技術進行突破與創新，對于提高我國計算機視覺相關領域的基礎研究水平具有重要的科學價值。同時，對提高我國群體性事件的防控能力，實現城市公共安全智能化、信息化管理具有重要的現實意義。

本項目執行期間，圍繞感知的多視點視頻處理的關鍵問題，抓住視覺媒體技術高速發展與廣泛應用、視覺信息感知多元化的契機，研究多視點視頻中立體視覺的感知機制與編碼優化模型。重點研究研究多視點深度協同的優化方法，通過提出跨視點的宏超像素單元及聯合優化，實現全局優化的多視點深度場；構建多深度融合感知的顯著性計算模型，采用聚類方法，提升深度顯著度計算中的魯棒性；進一步在多視點光場數據上研究深度感知優化的碼率分配方法和技術，實現多深度感知的多視點視頻高效編碼。最終取得核心理論與關鍵技術上的突破，實現原創性的科研成果，建立感知的多視點三維視頻數據高效處理平臺，進一步推動三維視頻在視覺感知表示、多視聯合處理、高效感知編碼等方面的研究與發展。

現實場景的三維視頻表示在軍事、航天、醫療、影視制作等領域有著廣泛的應用前景，以深度感知為核心的視覺特性驅動的三維視頻處理是當前國際研究的前沿與熱點，涉及視覺機理、圖像處理與優化等多個學科方向的交叉，其挑戰在于以多視點深度感知為驅動的多視點視頻聯合處理，涉及到的核心問題包括：時-空-視多深度感知一致性、雙目深度感知測度、多深度感知下的高效編碼方法等。本項目力圖揭示三維視頻在信號處理與視覺感知處理之間的協同優化機理，研究多視點深度協同的優化方法，探索時-空-視多深度場的幾何與深度感知一致性難題，實現全局優化的多視點深度場；構建多深度融合感知的顯著性計算模型，探索深度感知優化的碼率分配方法和技術，實現多深度感知的多視點視頻高效編碼，解決多深度感知驅動的三維視頻處理的關鍵問題，建立多深度感知的多視點視頻聯合處理與高效編碼平臺，在理論和關鍵技術研究上取得突破，推動以多視點為核心的三維視頻的廣泛應用。