基于时空单词的两人交互行为识别方法

被引:28
作者
韩磊
李君峰
贾云得
机构
[1] 北京理工大学计算机学院智能信息技术北京市重点实验室
关键词
交互行为分析; 行为识别; 时空特征; 条件随机场; 马尔可夫逻辑网;
D O I
暂无
中图分类号
TP391.41 [];
学科分类号
080203 ;
摘要
文中提出一种基于时空单词的两人交互行为识别方法,该方法从行为视频中提取丰富的时空兴趣点,基于人体剪影的连通性分析和时空兴趣点的历史信息,把时空兴趣点划分给不同的人体,并在兴趣点样本空间聚类生成时空码本(spatial-temporal codebook).对于给定的时空兴趣点集,通过投票得到表示单人原子行为的时空单词(spatial-temporal words).采用条件随机场模型建模单人原子行为,在两人交互行为的语义建模过程中,人工建立表示领域知识(domain knowledge)的一阶逻辑知识库,并训练马尔可夫逻辑网用以两人交互行为的推理.两人交互行为库上的实验结果证明了该方法的有效性.
引用
收藏
页码:776 / 784
页数:9
相关论文
共 7 条
[1]   Unsupervised learning of human action categories using spatial-temporal words [J].
Niebles, Juan Carlos ;
Wang, Hongcheng ;
Fei-Fei, Li .
INTERNATIONAL JOURNAL OF COMPUTER VISION, 2008, 79 (03) :299-318
[2]  
Learning, detection and representation of multi-agent events in videos[J] . Asaad Hakeem,Mubarak Shah.Artificial Intelligence . 2007 (8)
[3]  
Beyond Tracking: Modelling Activity and Understanding Behaviour[J] . Tao Xiang,Shaogang Gong.International Journal of Computer Vision . 2006 (1)
[4]   Markov logic networks [J].
Matthew Richardson ;
Pedro Domingos .
Machine Learning, 2006, 62 :107-136
[5]  
Video-based event recognition: activity representation and probabilistic recognition methods[J] . Somboon Hongeng,Ram Nevatia,Francois Bremond.Computer Vision and Image Understanding . 2004 (2)
[6]   A hierarchical Bayesian network for event recognition of human actions and interactions [J].
Park, S ;
Aggarwal, JK .
MULTIMEDIA SYSTEMS, 2004, 10 (02) :164-179
[7]  
Alchemy– Open Source AI .2 http: //alchemy.cs.washington.edu .