Long-term object detection requires the integration of frame-based results over several seconds. For non-deformable objects, long-term detection is often addressed using object detection followed by video tracking. Unfortunately, tracking is inapplicable to objects that undergo dramatic changes in appearance from frame to frame. As a related example, we study hand detection over long video recordings in collaborative learning environments. More specifically, we develop long-term hand detection methods that can deal with partial occlusions and dramatic changes in appearance. Our approach integrates object-detection, followed by time projections, clustering, and small region removal to provide effective hand detection over long videos. The hand detector achieved average precision (AP) of 72% at 0.5 intersection over union (IoU). The detection results were improved to 81% by using our optimized approach for data augmentation. The method runs at 4.7x the real-time with AP of 81% at 0.5 intersection over the union. Our method reduced the number of false-positive hand detections by 80% by improving IoU ratios from 0.2 to 0.5. The overall hand detection system runs at 4x real-time.


翻译:长期物体探测要求将基于框架的结果整合数秒钟。对于不畸形的物体,长期的探测往往使用视频跟踪来进行。不幸的是,跟踪不适用于从框架到框架的外观发生巨大变化的物体。作为相关的例子,我们研究在合作学习环境中对长视频记录进行人工探测。更具体地说,我们开发了长期的手探测方法,可以处理部分隔离和外观的急剧变化。我们的方法将物体探测综合起来,然后是时间预测、集群和小区域清除,以便在长视频上进行有效的手探测。手探测器在0.5个交叉点的交错处(IoU)达到平均精确度72%(AP),检测结果通过我们优化的数据增强方法提高到81%。该方法在0.5个交叉点上与AP(81%)进行实时操作。我们的方法通过将IoU比率从0.2提高到0.5,将假阳性手探测的数量减少了80%。整个手探测系统在4x实时运行。

0
下载
关闭预览

相关内容

Integration:Integration, the VLSI Journal。 Explanation:集成,VLSI杂志。 Publisher:Elsevier。 SIT:http://dblp.uni-trier.de/db/journals/integration/
Keras François Chollet 《Deep Learning with Python 》, 386页pdf
专知会员服务
163+阅读 · 2019年10月12日
[综述]深度学习下的场景文本检测与识别
专知会员服务
78+阅读 · 2019年10月10日
Unsupervised Learning via Meta-Learning
CreateAMind
43+阅读 · 2019年1月3日
Hierarchical Imitation - Reinforcement Learning
CreateAMind
19+阅读 · 2018年5月25日
【推荐】(TensorFlow)SSD实时手部检测与追踪(附代码)
机器学习研究会
11+阅读 · 2017年12月5日
【推荐】YOLO实时目标检测(6fps)
机器学习研究会
20+阅读 · 2017年11月5日
VIP会员
相关资讯
Top
微信扫码咨询专知VIP会员