基于镜头分割与空域注意力模型的视频广告分类方法

作     者：谭凯 吴庆波 孟凡满 许林峰 TAN Kai;WU Qing-bo;MENG Fan-man;XU Lin-feng

作者机构：电子科技大学信息与通信工程学院成都611731 

基　　金：国家自然科学基金(61601102 61502084 61871087)资助 

出 版 物：《计算机科学》 (Computer Science)

年 卷 期：2019年第46卷第3期

页      码：131-136页

摘      要：随着视频广告在检索和用户推荐等领域的广泛应用,视频广告的分类成为一个重要问题。与现有视频分类任务不同,视频广告有其自身的特点:1)在时域上,产品对象在广告视频中的出现具有非周期性和稀疏性的特点,这使得分类任务需要排除大量与视频类别不相关的视频帧的干扰,利用少数相关视频帧进行分类;2)在空域上,视频帧中除产品外,还包含复杂背景的问题,这使得有效捕捉产品信息变得困难。为了解决上述问题,文中提出了一种基于镜头分割和空域注意力模型的视频广告分类方法,简称SSSA。针对视频中存在的大量干扰帧,文中使用基于镜头切换的分割方法采样视频帧。针对视频帧中包含复杂背景,文中在网络中引入视觉注意力机制帮助网络从产品相关区域提取判别性的特征。为了验证所提方法的有效性,构建了一个包含1 000多个视频广告的数据库(简称TAV)并收集了眼动数据来训练注意力模型。实验结果显示,提出的SSSA视频分类方法比现有的视频分类方法在性能上提升了10%。

主 题 词：分类 视频广告 注意力 标注 

学科分类：08[工学] 080203[080203] 0802[工学-机械学] 

D　O　I：10.11896/j.issn.1002-137X.2019.03.019

馆 藏 号：203607343...