为了促进“计算机视觉+体育”方向的学术交流,12月18日晚7点,体育工程学院以腾讯会议的形式举办了学术讲座。我院本次邀请到北京航空航天大学计算机学院的孔龙腾博士给大家带来题为“体育视频中目标跟踪与行为识别关键技术研究”的精彩学术报告。本次讲座由体育工程学院教师李建伟博士主持,体育工程学院副院长沈燕飞、直属党支部书记许寿生、体育工程学院以及其他学院部分教师参与本次讨论学习。
孔博士的主要研究方向为体育场景中的视频分析,博士期间先后在体科所、旷视、英特尔从事相关研究。本次讲座,孔博士从体育视频分析的研究背景和意义出发,首先介绍了目标跟踪和行为识别等计算机视觉技术在智能体育领域的应用,然后详细介绍了自己博士期间的几项工作:
提出了一种协同单目标跟踪与行为识别框架:设计了尺度遮挡鲁棒的运动员跟踪方法,用于获得稳定的跟踪序列;设计了长时间区域导向的递归神经网络模型,更好地建模个体行为。
提出了一种基于长时间动作依赖的多运动员跟踪方法:设计了孪生检测框匹配网络,综合位置、表观、姿态线索生 成稳定初始跟踪片段;设计了孪生跟踪片匹配网络,利用动作补全和一致性判别机制建模长时间的动态信息,提高跟踪片段匹配精度。
提出了一种层次化注意力和上下文建模群体行为识别方法:同时考虑关键个体和个体交互关键语义信息,设计了层级注意力网络和层级上下文建模网络,建模个体之间交互行为。
提出了一种自适应的运动员关系建模的体育战术识别方法:设计了自适应的运动员关系图卷积网络,捕捉复杂的队员交互关系;设计了注意力时序卷积网络,建模长时间的动态演化,并且可以提取关键时序信息。
讲座的最后,孔博士对智能体育的研究方向做出展望。智能感知比赛态势可以根据比赛场上的球员行为预测比赛的走势,以便更好地进行裁决,自动预测解决“他们将怎么打?”问题。智能比赛对抗则是高层级的应用问题,根据对方的行为决定“我们应该怎么打?”的问题。
讲解结束后,各位老师积极向孔博士提问,探讨学术问题。如目标跟踪过程中运动员快速移动和严重遮挡等问题对跟踪算法的影响,实验所用的数据集标注和特征提取等问题,孔博士都做出了耐心的解释。
讲座的最后沈燕飞院长进行总结,对孔博士的研究工作和报告表示赞赏,非常高兴看到运动表现分析、技战术分析在其研究工作中能够互补的状况。通过本次讲座,各位老师对计算机视觉在体育领域的应用有了更加深入和直观的认识,更加坚信,计算机视觉技术作为人工智能的可视窗口,将在科技引领体育的时代大有可为。
(文、图: 李建伟)
附:主讲人简介
孔龙腾,北京航空航天大学计算机学院在读博士生,导师为王蕴红,主要研究方向为计算机视觉与模式识别(目标检测与跟踪、视频行为识别)。博士期间先后在体科所、旷视、英特尔从事体育场景中的视频分析研究,已发表 SCI/EI 论文 7 篇,其中 Trans.类期刊 2 篇,EI 国际会议 5 篇。