嘉宾介绍

       周文罡，中国科学技术大学信息学院，教授、博士生导师，国家“优秀青年基金”获得者。2011年博士毕业于中国科学技术大学，2011~2013年在美国德州大学圣安东尼奥分校做博士后研究，2013年9月回中国科大任教。研究方向包括多媒体内容分析与检索、计算机视觉。发表IEEE/ACM Trans.论文和CCF推荐A类会议论文共60余篇，谷歌学术总被引4000余次。入选中国科协“青年人才托举工程计划”和中科院青促会，曾获中科院百篇优秀博士学位论文奖、国际会议ICIMCS最佳论文奖（第一作者）。

报告介绍

报告题目：跨越视觉与语言-基于弱监督学习的视频手语识别

报告摘要：作为一种视觉语言，手语是聋人沟通交流的重要途径。听人一般缺乏系统性的手语学习，其与聋人沟通交流存在障碍。为了解决该问题，视频手语识别受到广泛关注，其旨在将手语视频变换为对应的文本，或进一步转换为语音。视频手语识别是一个典型的跨学科问题，涉及计算机视觉、自然语言处理、多媒体分析等多个领域。本报告首先介绍视频手语识别的研究背景和研究现状，然后针对视频手语识别中的一些挑战性问题，介绍课题组一些代表性研究工作，包括基于层级注意力网络的隐空间建模方法、基于迭代优化的手语视频对齐网络模型、基于强化学习的语义边界检测方法、基于时空多线索融合的识别方法等；最后，总结现有工作并对未来研究进行展望。 

参考文献

[1] Chengcheng Wei, Jian Zhao, Wengang Zhou, and Houqiang Li, “Semantic Boundary Detection with Reinforcement Learning for Continuous Sign Language Recognition,” IEEE Transactions on Circuits and Systems for Video Technology (TCSVT), 2020.

[2] Hao Zhou, Wengang Zhou, Yun Zhou, and Houqiang Li, “Spatial-Temporal Multi-Cue Network for Continuous Sign Language Recognition,” AAAI, Oral Paper, 2020.

[3] Junfu Pu, Wengang Zhou, and Houqiang Li, “Iterative Alignment Network for Continuous Sign Language Recognition,” IEEE International Conference on Computer Vision and Pattern Recognition (CVPR), 2019.

[4] Jie Huang, Wengang Zhou, Qilin Zhang, Houqiang Li and Weiping Li, “Video-based Sign Language Recognition without Temporal Segmentation,” AAAI, 2018.

直播信息

直播时间

6月23日（星期二）19:00-20:00

直播钉钉群

使用钉钉扫描二维码入群观看直播

说明：参加过往期直播活动无需重复扫码，一次入群，“CSIG云讲堂”系列直播均可观看。