利用网络图像增强行为识别

鉴于商业视觉搜索引擎的日益成熟,网络数据可能是下一个扩大视觉识别的重要数据源.通过观察发现,动作名称查询到的网络图像具有歧视性的动作场景.网络图像的歧视性信息和视频的时间信息之间有相互补充的优势.在此基础上提出一种利用大量的网络图像来增强行为识别的方法.具体框架是:提取行为视频的密集轨迹特征,并与网络图像特征相结合后放入支持向量机中训练分类.该方法是一个跨域学习问题,为了有效地利用网络图像特征,引入了跨域字典学习算法来处理网络图像,以解决网络图像域和视频域之间存在的域差异问题.由于网络图像可以轻松地在网络上获取,所以该方法几乎零成本地增强行为识别.在KTH和YouTube数据集上的实验结果表明,该方法有效提高了人体行为识别的准确率