作者投稿和查稿 主编审稿 专家审稿 编委审稿 远程编辑

计算机工程

• 图形图像处理 • 上一篇    下一篇

融合运动信息的三维视觉显著性算法研究

卢晶 1,2,张晓林 1,陈利利 1,李嘉茂 1   

  1. (1.中国科学院 上海微系统与信息技术研究所,上海 200050; 2.中国科学院大学,北京 100049)
  • 收稿日期:2016-12-29 出版日期:2018-01-15 发布日期:2018-01-15
  • 作者简介:卢晶(1992—),男,硕士研究生,主研方向为视觉显著性模型;张晓林,研究员;陈利利、李嘉茂,助理研究员。
  • 基金资助:
    上海市青年科技英才扬帆计划项目(14YF1407300)。

Research on 3D Vision Saliency Algorithm with Fusion Motion Information

LU Jing  1,2,ZHANG Xiaolin  1,CHEN Lili  1,LI Jiamao  1   

  1. (1.Shanghai Institute of Micro System and Information Technology,Chinese Academy of Sciences,Shanghai 200050,China;2.University of Chinese Academy of Sciences,Beijing 100049,China)
  • Received:2016-12-29 Online:2018-01-15 Published:2018-01-15

摘要: 计算机视觉领域中的视觉显著性研究大多局限于二维图像层面,而忽略人的视觉注意力决策是在三维动态场景下发生的。为此,在融合多种特征的显著性计算框架基础上,提出一种三维视觉显著性算法。通过场景的颜色信息、运动信息和深度信息分别计算各个特征通道下的显著性结果,再经过动态的融合得到最终的显著性结果。同时针对三维场景下显著性数据集的稀缺问题,给出一个用于评价三维动态场景下显著性算法的数据集。与HC算法、RC算法、GMR算法的对比结果验证了该算法具有明显的优势,并且更符合人眼的视觉注意力机制。

关键词: 视觉显著性, 三维场景, 运动信息, 深度信息, 对比度, 融合

Abstract: Most of the research on visual saliency in computer vision is limited to 2D image,and ignore the fact that human vision attention decision making operates in real 3D dynamic scene.So this paper proposes a 3D vision saliency algorithm which combines saliency computing framework with multiple features.Using color information of the scene,motion information and depth information,the saliency results of each characteristic channel are calculated respectively,and the final saliency results are obtained by dynamic fusion.Due to the lack of datasets of saliency in 3D scenes,this paper also proposes a new dataset for the evaluation of relevant algorithms.Compared with HC algorithm,RC algorithm,and GMR algorithm,quantitative results prove that the proposed algorithm outperforms all the other algorithms and better fits the visual attention mechanism of human eyes.

Key words: visual saliency, 3D scene, motion information, depth information, contrast rate, fusion

中图分类号: