您好,欢迎来到华佗小知识。
搜索
您的当前位置:首页视觉显著性检测的研究

视觉显著性检测的研究

来源:华佗小知识
文章编号:1007—1423(2017)14—0077—05 DOI:10.39690.issn.1007—1423.2017.14.016 视觉显著性检测的研究 庄斐弘.于威威 (上海海事大学信息工程学院,上海201306) 摘要: 计算机模拟人类视觉系统的生理机理对图像进行识别是视觉显著性检测研究的主要目的之一。在对图像的预处理过 程中.快速准确的显著性检测能够为图像检索、图像识别、图像分割等后期图像处理过程提供有价值的参考。然而目 前视觉显著性检测的算法还存在检测结果质量不高的问题。通过研究图像傅里叶频谱与显著性的关系,提出一种基 于相位谱和调谐幅度谱结合分水岭算法的显著性检测方法,以提高目前视觉显著性检测的效果。 关键词: 视觉显著性:分水岭;傅里叶频谱;相位谱;调谐谱 0 引言 随着计算机性能和数字存储技术的快速发展.人 们获取的数字图像数据容量不断增加.面对这些海量 的数据.人们越来越希望计算机可以更加自主更加智 能地进行处理 受到人类视觉系统能快速高效地分析 周围环境.定位感兴趣的物体.并做出相应的反应的启 发.如果计算机能够模拟人类视觉系统的这种机能来 处理视觉内容.那么将对视觉计算研究的各个领域产 生极大的促进作用.而计算机理解图像数据的关键是 显著性区域的视觉感知处理能力 表明了该算法的可行性和有效性。 1 基本概念和通用模型 1.1人类视觉系统(Human Visual System.I-WS) 人类的视觉系统能快速准确地处理人眼所看到视 觉场景:识别场景中物体、将不同的物体进行组合、理 解和分析整个场景.如果是带有目的性的.还能够在对 场景搜索之后很快达成目的 这个过程即使对目前最 先进的计算机和最有效算法来说都是一个非常困难 的.而人类视觉系统处理这么复杂的过程只需要在极 短的时间内就能完成 目前.Neisse一 提出的描述人类 视觉系统作用过程的机制最被认可.他将早期视觉 (Earlv Vision)处理过程分为预注意处理阶段(Pre-at. tentive Stage)和注意处理阶段(Attentive Stages) 视觉 目前已有的一些模型和算法在一定程度上实现了 上述功能.但在某些方面还存在不足 针对现有显著性 区域检测方法存在的问题.本文提出了一种基于相位 谱和调谐幅度谱结合分水岭算法的显著性检测方法 该方法首先对要检测的图像进行傅里叶变化.提取相 系统的前意识阶段在第一阶段中是最主要的.这个阶 段只处理和检测场景中显著的特征.场景中不同于大 多数的背景的区域部分能够引起视觉细胞更大的刺 激。而到了第二阶段.神经系统会将这些显著的特征通 过某种关系进行融合和聚类.然后形成注意力分配图 位谱和幅度谱 而图像的相位谱反映的是图像的纹理 信息.因此保留图像的相位谱.对图像的幅度谱进行处 理。对幅度调谐。得到一个合适的阈值.使显著性区域 幅值加强.非显著性区域削弱.从而得到初步显著性 图 然后再对得到的图像用分水岭算法进行分割.通过 来指导眼球的运动.视觉信息在HVS中的传递过程如 图1所示 在这基础之上.MIT大学的David C.Marr[3 ̄ 确定算法中的阈值来得到最终的显著性图.实验结果 提出视觉处理的预注意阶段会将进入视觉系统内的光 现代计算机 2017。05中囝 图形图像 线 化为颇 、边缘、线祭和倾角等 。3i 将这些特征 进f 特定的编鹏术形成x,J‘ 觉场 的}JJ步 示,最终 f『: 觉系统能够进fnj 圳fn分忻 、 枣 证 而 , 冬1 1 觉 ,rj、 H、S 旧f0递过 i.2视觉显著计算模型 觉 : } 址利J}j数 ,I冬l像处理力‘ 法.仪拟人类 觉 ~le,'r-系统.埘 场 ft小MI的信息构建 的 觉认 、¨ 挟收的数学汁算帧 缃迮 觉5 ?’: I 寸 懈决 个问题:(1) 持:特 的提 :(2) ,f-成策略:(3) 著I 融合 小同fj!J 的 1一 圳 丁 l:l!J 缃 过程叶1采川1 川策略处理这 1\阶段 模, 能 坏n0 价指标卡嘤址 汁算结果 人观察视场的 - -的一致 度 近 束. 内外们f究人员提fI1 r多种 觉 若汁 钟: J .正受IJ胁文指…. 觉注意过 一ft位 白底向I (I{tltl…1l—ui_1)科I¨I If1 卜( Fop-dt)、、I】)f IlYL'¥-4视觉5 : } 的建立 分为lllj补不同的研究 f 自I 而 卜的 觉 汁 嵌jI 址根据特定的仟务也 . 论 f¨幢川均具彳『J …此.口1j1『=绝人数的们『究成粜均 址研究I 1 向l 的fI{J I』剖寺 动的汁博模掣 白 … 觉 著性汁 ti!_ 足从底层特 始.生成不 l州&达,】‘浊的特 .以形成对人 的表达 这f1I】力‘ ‘ 点址 州场景 标自身 j所处 域.或 场 个=¨的 圳。 圳越i J . 越 从特 描 述的策略干¨建卡I!的心 I I)(分,陔类模, 人敛有 类: (1)桀于视觉认,上1… 汁算fIl J 该类疗法利J1]多种 像 伞』|j 特 进行融合.建 觉 普模型. n¨I 【桃觉 愤I hfi模 对 像进{ 线性滤波 .利川 像的 包特 、强腰特 干¨厅…特征.进行9 @ 现代计算机2017.05中 J 高斯金 : 滤波.挟得各…n!lI!_ : .冉利J lfI 一 边缘”(( 1[(tl'-Sl'[1ll(I(IPr)饥制,采取“ 通屹”的策略, 进行线性融 .扶 最终 像 :I冬【 (2) 了:rrL一数学计钎:的 。 。分析疗 /f 干IJ川 仟fuJ 觉认 fJ【川.Ⅲ数学,J‘ &达 像.亓利川数 、 :: ‘式埘 像进 冀・性计。 .jCIJt ̄}I 代表仃. rantn 等人提…的个分辨牢算法.[If Jl’:浊干兀Ht)tlI I 人摊 …t的频域 残余(SI)eetrall s Ⅲ1.SI{)算法.这『Ⅵ个": 法足在埘人{{ r{然』纠像进行 半I~埘数i酱分析 发 脱.冗余背景价息人敛卡H同. 『I际 有较 的“火 锐”特性. I(I 进仃的顿域内运钟: I变换 (3)2i ̄i合 觉认知 j数 汁弭的 著怕!提取JJ‘没 j 代表 H l…等人摊f 0 川皇{像的视觉 : ((;raI)h—Base(1 Vistlal Salien( (:l{V )算法 这利J ‘ 法号虑到 觉认知摸 数 、 I‘ 的 址.摊… 利Ⅲ人类 觉认 I 论建立 怵钟:法 架. , 1人数 :计算 ’法. 丁,I尔科犬链进 随fJ【游屯.建、 觉 lI 著摸割 就近 束 代表 的 觉 :汁苒馍J 的作 息、提…时删 采川的 水策略 息 如丧l所爪 表1具有代表性的视觉显*计算模型 显著算法 作者 提出时阀 采取策略 Itti 【 ttj_I】l(I Koch 1998 ,j域_} In底川I的戚J拍生  特 CG rOl,l alb}1 a1. 2006 F史特 指 j{ GBVS Hea'el et a1. 2006 j^j。 模, 的 荆 SR ltou^ll(1 Zhang 2007 顿域ll}_残余 |l QPFT l0 t a1. 2008 j&j 托lfl f 持的f IiIIf 坚{ JUDD Judd ot 11. 2009 l L J‘ 地川 舱忤学 J{I一}  的 f叮 Ac}HI1“l ct a1. 2009 }】j】 修 HC Cherl et aI l2011 ,、J j颜色九 ‘ 对比 RC (’ l『1【l1 d】. 2011 }  ‘审问 m J【j】m狈 划 SER Wang 1 al J010 怖疏农小的 熵 } CAS GOferilian et d1. 201 。 ¨J域 f1璀J I—l、史敞感fI{J - 署 m受 0SA Scllatlert t a1. 1012 QPDT的特 伯fl1恃 轴_ m1 l_i pt a1. Ol3 复数他 】1娈撷』J RARE Ri(、}io}1t a1. 2013 l^J。多尺度的特 稀少 2 方法原理概述 2.i频域谱残余方法 南Hou f1I ZhangI 1提…的SR力 法 '欠从坝牢域的 『f】度分析Ikl1像的 觉 蔷性通过抽嫩IN像在顿域I-’ 的残余频谱.SR厅法能够怏逑地汁钟:…空问域的 图形图像 枉{ 离 抑制 .人的 觉系统彳F抑制 常发 小flli' 、 I: .水会逐渐淹没策水 此处筑起一道堤圳 j来rl 个不同}J=乏 的特 的l川时 持刈‘偏离Ij 常状念的特 敏感1 5]彳『 ’观的 一能做 递到处理的i.-个阶段此 SR 小 点j 域的水 小断升高外 将汇聚刮一 illf. 整个过 站求之 . 个卞鹱小 分 .最终 方法分}戊=‘1\步骤: ・ 酃会傲{叶1 叶变换,将』 变换剑频率域_斤 成分水岭现 像分割 (1) 圳 水盆的堤坝昕也….祭个堤 !集合 (1)对 像进 i IJ振f0 j l十Hf 谱 {l/)= ( ,(-l’)1) 不 的 水盆代丧 像的 现分水岭分割 法 怀定一 种子点:分 景种子点币¨背 利t子点 这 种种丁点的选取 , ∽= (.Sl/(.Y)1) (2)变抓 为对数谱. 计算残余 (2) rl『以 丁 米确定 设定一个较低的阀衄r『’l¨ 蔷忡低丁TI_ 、、的点将其认为足背景f≮域的点;I叫 .设 定~‘个较高闽f rI1l¨ , 荠性 丁r【1l¨ 的点将Jt认为是 景f×:域的点然 把怀i f『j的这些点作为输入.就能 ,| )=/r ( l(/’)) 尺∽=,J∽一/7,z(/’) L∽ (3)通过反向博Ij 变换.利川残余 flI{寸1f 凿僻 刊 嚣・ 现罔像的分水岭分割 、 rr}¨ 这两个的I 值的没 定基r均俺最人值JJu仪 均法动念闽 : 1 ( )==g( ) 。。)I .、_,J(R(/、)+, l/’))】 (3) =— T =(4) I SR 法逦过对 像的幅度潜进i 的酃均俩滤波 以达到 制 C余信息的I:㈨0.而博 l 变换和I反变换 也足 像处理【f1蚊 础的汁钟:之一.行H SR 法的汁 速度比较快虽然陔方法 制r非 *悱 息. j ‘‘ f占息 一般:细 . 致 }丁能存一定 瞍 此¨川‘也 制了 像的 I 表爪¨l ÷ +÷ll1ax , (, ) - 二 (5) 3¨比J,JL个采川分水岭分削弹法的 觉 悱榆洲 .』C『fl 二仃的 苫罔世通过小义捉…的 ‘法 卢斤得刊的 从 验 ,】‘以 ….小'艾昕提¨5的 合分 了 著『纠的对比度较筹,F1.效 水岭弭法的}见觉 并 :俭洲力‘法的效 足比较 的 。 日抓昕存的 域.小能 全丧明 暂 3 实验结果与分析 为r榆验小文力 法的效粜,在MATLAB 台I: lf牛lI标的准确化荭 轮 .如 2所永 2.2分水岭算法 分水岭 法 足坫丁摸拟浸水过程实现的i发 法 现了本文挺川:的算法通过在 h廿[】faISl捉洪的1000 像的数抛集j 进行删试,将 义疗法t L种fI n订比 较 的力‘法进行丁对比 这L种 士分圳是最为 . 的堪小思想是把 像胥成是地质学上的3D地貌拓扑. 像巾每一点像素的灰度值看作是海拔高度.每一个 部极小 及其影响 域被称为集水 似没在每个 f』正小点处¨一个小孑L.把这个地质学模型慢慢浸入水 ll1,水将从这些/I',TL【l1慢慢浸入模型表面.从最低的fJ互 典的IT' I方法,输¨!为 分辨率 著性 的FTIS'7 ̄‘法于 城的绎 的RC…1 法, 于顿域的SR{ 。法币¨ HFT },J‘法以及结合高层 息的CAl' ̄lh 法 LR[,41,J‘法 I l I参 l  j现代计算机 2o17.o5中囝 图形图像 \ 为了 r,l 能排除影响实验 ^果的 素.小迓的实岭 一忡I 城fI1 荠 域为突¨{的问题 冉看罔4 硬什设备环境F 脱. 所/f ,J一法部住A hart— ((1)第1、2仃『11花朵用 的I 域.南于RC 法是旗r I 域埘比 的. 突¨l 像lf】嘲色对比度较高 域的 川时也灾…J 部分颜包埘比度较 的背景I 域 图4 (t )卡【 I4(f)lI1. 丁顿域的SI{f【 JHFT疗法 I更注重丁 td1000数抛集J:测 所有埘比方法郝使川了原作 的提供的算法f『1 序,FT、RC、SR这 种方法使川文 献I8川t提供的c++代码史观。I3 、HFT、CA、LR这【J 种 方法使川其文献作 提供的MATI AB n 束 现 像,殳J 述提刮的L种方法的实验纳求『』【 4所,】j: 突… 巾 -. II怀的轮 而使 性目标的边缘比较模 而『冬1 4(g)断爪的(:A ‘法上¨恰恰十}1反.所 {llj_苦l冬1 ..M-:IK域并没有被 恪的突…但边缘比较突f 最 I訇4(1 )昕爪的I R疗法虽然能够完祭地突 I堑1像 的!『l!-蔷 : 域. 粜较为 该方法埘罔像背特 域的抑制效果 仪范}】f{了I 述某些 法小能 /f 件 小文提…的 ’法解决r f 述方法 著 检测效 的 题. I I I I望 3儿种分水岭 n0寰盼《・rl L结 个灾… 像 {l 个 并 },I-: 域的缺点.还比其『11的几 个疗法更仃效地抑制了 像【fl的非5 性I 域.较为 完 地突…r 像巾的5 悱』X域 l●I◆ I...I 刈 4巾的这JL币叶・方法的 验结果进仃比较rtJ’以 4 结语 小文通过研究博里IIl 顿潜与!l 菩性的父系提¨{了 种 于{寸1 瞒平¨州潴 度谱结合分水岭算法的 菩 {’:;=测 法 i发 ‘法允通过他 叶变换提取罔像的卡I{ 位 fn幅发谱.行对幅度晰进 发渊i皆处 .冉对得刮 的 像JI J分水岭 法进f 分割最终僻到 著性 实 看 }{. 4(1J)昕示的IT_厅法只能榆洲fl; 像 悱J≮ 域llJ的个圳儿个小I天域虽然FT方法能够灾ff; 像lfl 具 特殊像素的 域.似 确性 .某些 有特殊像 验 粜表叫.卡H较丁以胁的方法本文的算法能 有效 地愉测… 像的 符性I 域.同时抑制I刘像 I1的非 性 域 素的IX域并不足 苦性I×:域 而且从 4((.)旃2 4 i I1化朵的lfl问 域【1『以胥川{FT力’法仃在突¨;了 (d)RC(e)SR (f)HFT(g)CA(h)LR (i)本文方法 纠4 L种 法‘j小文算法 验站 的对比 ⑨ 现代计算机2017.o5中 参考文献: 『1]U.Neisser.Visual Search[J].Scientiifc American,210(6):94—102,1964. [2]U.Neisser.Cognitive Psychology[M].Appleton—Century—Crofts,New York,1967 [3]D.Mary,A.Vision.A computational Investigation Into the Human Representation and Processing of Visual Information[J].WFi San Francisco:Freeman and Company,1 982. 【41D.Mary,L..Vaina.Representation and Recognition of the Movements of Shapes[J].Proceedings of the Royal Society of London.Series B.Biological Sciences,1982,214(1197):501—524. [5]Hou X,ZHANG L.Saliency Detection:A Spectral Residual Approach[C].IEEE Conference on Computer Vision and Pattern Recogni— tion.USA:CVPR,2007:1—8. 【61C Koch,T Poggio.Predicting the Visual World:Silence is Golden[J].Nature Neuroscience,1999,2:9—10. 【7]WANG Xiao—peng.Morphological Image Analysis Principles and Applications[M].2nd ed.Beijing:Tsinghua University Press,2008:58. 【8]Achanta R,Hemami S,Estrada F,et a1.Frequency-Tuned Salient Region Detection[C].Proceedings of the IEEE Conference on Com- purer Vision and Pattern Recognition,2009:1597-1604. 【9]Itti L,Koch C,Niebur E.Model of Saliency—Based Visual Attention for Rapid Scene Analysis[J].IEEE Transactions on Pattern Analy- sis and Machine Intelligence,1998,20(11):1254—1259. [IO]HAREL J,KOCH C,PERONA P.Graph—Based Visual Saliency[C].Proceedings of Advances in Neural Information Processing Sys- tems,2007:545—552. [11]Cheng M M,Zhang G X,Mitra N J,et a1.Global Contrast Based Salient Region Detection[C].Proceedings ofthe IEEE Computer So— ciety Conference on Computer Vision and Pattern Recognition,201 h 409-416. [12]Li J,Levine M D,An X,et a1.Visual Saliency Based on Scale-Space Analysis in the Frequency Domain[J].IEEE Transactions on Pattern Analysis and Machine Intelligence,2013,35(4):996—1010. [13]Goferman S,Zelnik-Manor L,Tal A.Context-Aware Saliency Detection[J].IEEE Transactions on Pattern Analysis and Machine Intel— ligence,2012,34(10):1915—1926. [14]Shen X,Wu Y.A Uniifed Approach to Salient Object Detection Via Low Rank Matrix Recovery[C].Proceedings of the IEEE Com— puter Society Conferenee on Computer Vision and Pattern Recognition.2012:853—860. 【15]ACHANTA R,ESFRADA F,WILS P,et a1.Salient Region Dection and Segmentaion[C].Proceeding of the International Conference on Computer Vision Systems.Springer,2008. 作者简介: 庄斐弘(1991一),男,硕士研究生,研究方向为计算机图像处理 于威威(1978一),女,副教授,硕士生导师,研究方向为模式识别、计算机图像处理、数据挖掘等 收稿日期:201703—06 修稿日期:2017—05—10 Research on Visual Saliency Detection ZHUANG Fei-hong.YU Wei-wei (Department of Information Engineering,Shanghai Maritime University,Shanghai 201306) Abstract: It is one of the main purposes of visual saliency detection to simulate the physiological mechanism of human visual systemAs the .preprocessing of image,reliable and rapid saliency detection can provide valuable reference information for image retievalirmage ,segmentation,image retrieval and so on.However,at present,there are some problems in the algorithm of visual saliency detection,. Through the study of the relationship between Fourier spectrum and the signiifcance of the image spectrumproposes a phase spectrum and amplitude spectrum tuning saliency detection method based on watershed algorithm,to improve the visual saliency detection effect. Keywords: Visual Saliency;Watershed;Fourier Spectrum;Phase Spectrum;Tuning Spectrum 现代计算机 2017.05中① 

因篇幅问题不能全部显示,请点此查看更多更全内容

Copyright © 2019- huatuo0.cn 版权所有 湘ICP备2023017654号-2

违法及侵权请联系:TEL:199 18 7713 E-MAIL:2724546146@qq.com

本站由北京市万商天勤律师事务所王兴未律师提供法律服务