王振华副教授课题组在多人交互行为视觉识别领域取得新进展

近日，我院智能媒体处理团队王振华副教授课题组在多人交互行为视觉识别领域取得新进展，研究成果“Human Interaction Understanding with Consistency-Aware Learning”在模式识别领域权威期刊《IEEE TPAMI》（IEEE Transactions on Pattern Analysis and Machine Intelligence）上发表。IEEE TPAMI被中国计算机学会归为A类期刊（CCF A），被学校划分为G1期刊，目前影响因子为24.31。我院为该论文通信作者单位，王振华副教授为论文通信作者，所指导的浙江工业大学博士研究生孟佳俊为论文第一作者。

为解决交互行为识别中预测标签的不一致问题，该论文提出了一种基于高阶图神经网络和一致性先验条件的深度学习方法。该方法引入了逻辑的隐式表示和显式表示，并通过结合这两种表示形式有效提升了多人交互行为解析的一致性和精度。实验表明，该方法能够更好的捕捉人类交互行为中的语义关系，同时通过引入一致性先验条件，能够更好地捕捉不同交互组之间的相关性和一致性。这项研究成果在解决标签不一致性问题上具有重要意义，并为交互行为识别领域的进展带来了有力的推动。该方法可以帮助视频监控系统更准确地分析和理解视频中的人际交互行为，从而提供更有效的安全监控和事件检测。

研究工作得到了国家重点研发计划、国家自然科学基金等项目的资助。