光电信息6图像增强.pptx

基于光电信息的计算机视觉技术基于光电信息的计算机视觉技术3.1 计算机视觉的概述计算机视觉的概述 3.2 光电信息处理基础光电信息处理基础 3.3 数字图像技术数字图像技术3.4 数字图像处理技术数字图像处理技术 3.5 距离图像获取与处理距离图像获取与处理 n图像分析技术分类的三种基本范畴图像分析技术分类的三种基本范畴n低级处理：图像获取、预处理，不需要智能低级处理：图像获取、预处理，不需要智能n中级处理：图像分割、表示与描述，需要智能中级处理：图像分割、表示与描述，需要智能n高级处理：图像识别、解释，缺少理论，为降高级处理：图像识别、解释，缺少理论，为降 低难度，设计得更专用。低难度，设计得更专用。3.4数字图像处理技术数字图像处理技术知识库知识库表示与描述表示与描述预处理预处理分割分割低级处理低级处理高级处理高级处理中级处理中级处理识别识别与与解释解释结果结果图像获取图像获取问题问题图像分析系统的构成图像分析系统的构成数字图像处理技术数字图像处理技术3.4.3图像增强图像增强3.4.4图像分割图像分割3.4.5特征提取特征提取3.4.6识别与解释识别与解释3.4.3图像增强图像增强3.4.3.1 图像增强引言图像增强引言3.4.3.2 空域图像增强空域图像增强3.4.3.3 频域图像增强频域图像增强n图像的增强用于调整图像的对比度，突出图像图像的增强用于调整图像的对比度，突出图像中的重要细节，改善视觉质量。通常采用灰度中的重要细节，改善视觉质量。通常采用灰度直方图修改技术进行图像增强。直方图修改技术进行图像增强。n图像增强的定义图像增强的定义n图像增强的空域法图像增强的空域法n图像增强的频域法图像增强的频域法3.4.3.1 图像增强引言图像增强引言n图像增强技术的主要目标是，通过对图像的图像增强技术的主要目标是，通过对图像的处理，使图像比处理前更适合一个特定的应处理，使图像比处理前更适合一个特定的应用用预处理预处理n可能的应用：显示、打印、印刷、识别、分析、可能的应用：显示、打印、印刷、识别、分析、创艺等创艺等n可能的处理策略：空域策略、频域策略可能的处理策略：空域策略、频域策略图像增强的定义图像增强的定义n去除噪音去除噪音n边缘增强边缘增强n提高对比度提高对比度n增加亮度增加亮度n改善颜色效果改善颜色效果n改善细微层次改善细微层次通常与改善视觉效果相一致通常与改善视觉效果相一致图像增强的定义图像增强的定义-可能的处理可能的处理图像增强举例图像增强举例图像增强举例图像增强举例2图像增强的空域法图像增强的空域法n图像增强的空域法图像增强的空域法n点运算法点运算法灰度级变换灰度级变换n寻找一个合适的变换寻找一个合适的变换Tn模板运算法模板运算法空域过滤器空域过滤器n寻找一个合适的模板寻找一个合适的模板n几何变换法几何变换法变形矫正变形矫正n基于色彩的处理基于色彩的处理n频域增强的理论基础频域增强的理论基础n频域增强的处理方法频域增强的处理方法n频域增强与空域增强的关系频域增强与空域增强的关系图像增强的频域法图像增强的频域法n卷积理论卷积理论n被处理图像被处理图像f(x,y)n变换函数变换函数h(x,y)/*线性、位置无关操作线性、位置无关操作n目标图像目标图像g(x,y)有卷积：有卷积：g(x,y)=h(x,y)*f(x,y)有等式：有等式：G(u,v)=H(u,v)F(u,v)有等式：有等式：g(x,y)=F-1H(u,v)F(u,v)空域法空域法-频域增强的理论基础频域增强的理论基础n图图像像变变化化平平缓缓的的部部分分靠靠近近频频率率平平面面的的圆圆心心，这这个个区域为低频区域。区域为低频区域。n图图像像中中的的边边、噪噪音音、变变化化陡陡峻峻的的部部分分，以以放放射射方方向离开频率平面的圆心，这个区域为高频区域。向离开频率平面的圆心，这个区域为高频区域。频率平面与图像空域特性的关系频率平面与图像空域特性的关系边、噪音、变化陡峭部分边、噪音、变化陡峭部分变化平缓部分变化平缓部分uv频域增强的原理频域增强的原理变化平缓部分变化平缓部分uv频域增强的原理频域增强的原理2边、噪音、变化陡峭部分边、噪音、变化陡峭部分n对于给定的图像对于给定的图像f(x,y)和目标，计算出它的和目标，计算出它的傅立叶变换傅立叶变换F(u,v)n选择一个变换函数选择一个变换函数H(u,v)/*并非到空域找并非到空域找n计算出目标图像计算出目标图像g(x,y)g(x,y)=F-1H(u,v)F(u,v)频域增强的处理方法频域增强的处理方法n卷积的离散表达式，基本上可以理解为模板卷积的离散表达式，基本上可以理解为模板运算的数学表达方式运算的数学表达方式 M-1 N-1g(x,y)=f*h=f(m,n)h(x m,y n)m=0 n=0n因此，卷积的冲击响应因此，卷积的冲击响应h(x,y)，被称为空域卷积，被称为空域卷积模板，模板，这种称谓仅在模板相对中心原点是对称这种称谓仅在模板相对中心原点是对称的时，才是成立的的时，才是成立的频域增强与空域模板增强的关系频域增强与空域模板增强的关系n在实践中，小的空间模板比傅立叶变换用在实践中，小的空间模板比傅立叶变换用得多得多，因为它们易于实现，操作快捷。得多得多，因为它们易于实现，操作快捷。n对对于于很很多多在在空空域域上上难难以以表表述述清清楚楚的的问问题题，对对频频域域概概念念的的理理解解就就显显得得十十分分重重要要。在在压压缩中我们会体会到缩中我们会体会到频域增强与空域增强的关系频域增强与空域增强的关系23.4.3.2 空域图像增强空域图像增强3.4.3.2.1 点运算增强点运算增强3.4.3.2.2 直方图增强直方图增强3.4.3.2.3 彩色图像增强彩色图像增强3.4.3.2.4 空域过滤器空域过滤器3.4.3.2.1 点运算增强点运算增强n点运算点运算灰度级变换增强灰度级变换增强n灰度级变换的应用灰度级变换的应用n亮度调整亮度调整、对比度拉伸对比度拉伸、灰度级切片灰度级切片n获取变换函数的方法获取变换函数的方法n固定函数、交互样点插值、直方图固定函数、交互样点插值、直方图n灰度级变换的分析灰度级变换的分析点运算增强点运算增强-亮度调整亮度调整n灰度级变换的应用之一灰度级变换的应用之一n亮度调整亮度调整加亮、减暗图像加亮、减暗图像25512825532255128255218点运算增强点运算增强2对比度拉伸对比度拉伸n灰度级变换的应用之二灰度级变换的应用之二对比度拉伸对比度拉伸提高、降低对比度提高、降低对比度2551282551420降低对比度降低对比度255482550218提高对比度提高对比度P1P2点运算增强点运算增强3灰度级变换的应用灰度级变换的应用n提高对比度提高对比度n通常通过直方图得到两个拐点的位置通常通过直方图得到两个拐点的位置n 降低对比度降低对比度n降低对比度一般用于输出设备的灰度级小降低对比度一般用于输出设备的灰度级小于输入图像的灰度级的情况，如显示傅立叶于输入图像的灰度级的情况，如显示傅立叶频谱时频谱时点运算增强点运算增强4灰度级变换的应用灰度级变换的应用通过直方图得到两个拐点通过直方图得到两个拐点P1、P2的位置的位置p(rk)nkP1P2点运算增强点运算增强5-灰度级变换的应用灰度级变换的应用n局部提高、局部降低对比度局部提高、局部降低对比度255128255142025548255019621623点运算增强点运算增强6-灰度级切片灰度级切片灰度级变换的应用之三灰度级变换的应用之三灰度级切片灰度级切片255482550134176255142255214048点运算增强点运算增强-获取变换函数的方法获取变换函数的方法 获取变换函数的方法之一获取变换函数的方法之一固定函数：指数函数、正玄函数、分段直线、固定函数：指数函数、正玄函数、分段直线、对数函数，如显示傅立叶的对数函数，如显示傅立叶的s=c log(1+|r|)s=c log(1+|r|)2551420255021623点运算增强获取变换函数的方法点运算增强获取变换函数的方法2n 获取变换函数的方法之二获取变换函数的方法之二交互样点插值交互样点插值用过点的三次样条插值曲线，获得变换函数用过点的三次样条插值曲线，获得变换函数点运算增强点运算增强灰度级变换的分析灰度级变换的分析n灰度级变换对图像层次有负面影响灰度级变换对图像层次有负面影响n原因：由于变换是在有限个灰度级上进行的，原因：由于变换是在有限个灰度级上进行的，因此会造成层次的减少（见实例）因此会造成层次的减少（见实例）n改进：通过输入较多层次（如改进：通过输入较多层次（如28)，保证在，保证在图像上进行灰度级变换后，其输出保留足够图像上进行灰度级变换后，其输出保留足够的层次的层次3.4.3.2.2 直方图增强直方图增强n直方图增强直方图增强n直方图均衡化直方图均衡化n直方图匹配直方图匹配直方图均衡化直方图均衡化n一种自动调节图像对比度质量的算法一种自动调节图像对比度质量的算法n使用的方法：灰度级变换：使用的方法：灰度级变换：s=T(r)n基本思想：通过灰度级基本思想：通过灰度级r的概率密度函数的概率密度函数p(rk)，求出灰度级变换求出灰度级变换T(r)nr正则化到正则化到0，1 k k sk=T(rk)=p(rj)=nj/n j=0 j=0直方图均衡化的技术要点直方图均衡化的技术要点n公理：直方图公理：直方图p(rk)，为常数的图像对比度最好，为常数的图像对比度最好n目标：寻找一个灰度级变换目标：寻找一个灰度级变换T(r)，使结果图像，使结果图像的直方图的直方图p(sk)为一个常数为一个常数n实现：强制认为累积分布函数实现：强制认为累积分布函数CDF是我们要找是我们要找的的变换函数变换函数T(r)，r s=T(r)=pr(w)dw 0 r 1 0直方图均衡化的技术要点直方图均衡化的技术要点2n直方图均衡化的技术要点：直方图均衡化的技术要点：n公理：直方图公理：直方图p(rk)，为常数的图像对比度最好，为常数的图像对比度最好p(rk)nkP1P2直方图均衡化的算法实现直方图均衡化的算法实现n累积分布函数累积分布函数CDF的计算的计算 用累积分布函数用累积分布函数CDF的离散形式来计算的离散形式来计算 k ksk=T(rk)=p(rj)=nj/n j=0 j=0n算法实现：算法实现：1)求出灰度级变换求出灰度级变换T 2)用用T对图像进行灰度级变换对图像进行灰度级变换直方图均衡化举例直方图均衡化举例直方图增强举例：直方图增强举例：图像图像f(x,y)，宽，宽300，高，高100像素，偏暗像素，偏暗2551000064直方图均衡化举例直方图均衡化举例-计算变换计算变换T T(0)=1000/3000*255=85 T(63)=T(62)+0/3000=85T(64)=(1000/3000+1000/3000)*255 =170T(254)=T(253)+0/30000=170T(255)=(1000/3000+1000/3000+1000/3000)*255=255直方图均衡化举例直方图均衡化举例变换函数变换函数得到变换函数：得到变换函数：T(0)=85.T(63)=85T(64)=170.T(254)=170T(255)=2551000255085170变换后的图像和直方图直方图均衡化直方图均衡化-问题问题n图像最暗处依赖于原图像图像最暗处依赖于原图像0灰阶像素的个数。有偏灰阶像素的个数。有偏亮的倾向。亮的倾向。矫正：矫正：Xo=(Xi-85)/(255-85)*2551000255085170直方图均衡化直方图均衡化-矫正后变换函数矫正后变换函数矫正后变换函数为矫正后变换函数为T(0)=0.T(63)=0T(64)=128.T(254)=128T(255)=25510002550128直方图均衡化直方图均衡化-矫正前后的比较矫正前后的比较矫正前后的比较矫正前后的比较1000255012810002550851702551000064直方图均衡化的物理解释直方图均衡化的物理解释1 1）直方图均衡化，不改变灰度出现的次数（因为）直方图均衡化，不改变灰度出现的次数（因为那样会改变图像的信息结构），所改变的是出现那样会改变图像的信息结构），所改变的是出现次数所对应的灰度级。次数所对应的灰度级。k kT(rT(rk k)=n)=nj j/n /*/n /*矫正后非零像素数同前矫正后非零像素数同前 j=0j=02 2）直方图均衡化，力图使等长区间内出现的像素）直方图均衡化，力图使等长区间内出现的像素数接近相等。（见上例）数接近相等。（见上例）直方图匹配算法来源背景直方图匹配算法来源背景n算法来源背景：算法来源背景：n直方图均衡化的缺陷直方图均衡化的缺陷：不能用于交互方式的图不能用于交互方式的图像增强应用，因为直方图均衡化只能产生唯一像增强应用，因为直方图均衡化只能产生唯一一个结果，恒定值直方图近似。一个结果，恒定值直方图近似。n希望通过一个指定的函数（如高斯函数）或用希望通过一个指定的函数（如高斯函数）或用交互图形产生一个特定的直方图。根据这个直交互图形产生一个特定的直方图。根据这个直方图确定一个灰度级变换方图确定一个灰度级变换T(r),使由使由T产生的新产生的新图像的直方图符合指定的直方图。图像的直方图符合指定的直方图。直方图匹配算法思想直方图匹配算法思想n算法思想：算法思想：设：设：rk是原图像的灰度级是原图像的灰度级,zk是符合指定直方图结果图像的灰度级是符合指定直方图结果图像的灰度级我们的目标是：找到一个灰度级变换我们的目标是：找到一个灰度级变换H,有：有：z=H(r)直方图匹配算法思想直方图匹配算法思想2n算法思想：算法思想：1)对对rk、zk分别做直方图均衡化分别做直方图均衡化s=T(r)=0 pr(w)dw 0 r 1v=G(z)=0 pz(w)dw 0 z 12)求求G变换的逆变换变换的逆变换 z=G-1(v)直方图增强直方图增强直方图匹配直方图匹配4n算法思想：算法思想：3)根据均衡化的概念，根据均衡化的概念，s,v都是常量都是常量 用用 s替代替代v有有z=G-1(s)4)求求G-1和和T的符合变换，有：的符合变换，有：z=G-1(T(r)=G-1T(r)H=G-1T直方图匹配算法实现直方图匹配算法实现n算法实现：算法实现：1）求出灰度级变换）求出灰度级变换T 2）求出灰度级变换）求出灰度级变换G,同时求出逆变换同时求出逆变换G-13）通过）通过T和和G-1求出复合变换求出复合变换H4）用）用H对图像做灰度级变换对图像做灰度级变换n彩色图像增强彩色图像增强n在在RGB模型上增强模型上增强n在在HSI模型上增强模型上增强3.4.3.2.3 彩色图像增强彩色图像增强彩色图像增强彩色图像增强2n与色彩平衡相关的几个定义与色彩平衡相关的几个定义n灰灰平平衡衡：使使RGB彩彩色色设设备备的的彩彩色色分分量量混混合合后后，颜颜色色失失去去色色调调和和饱饱和和度度产产生生灰灰色色，这这种种颜颜色色混混合合效效果果被被称称为为灰灰平平衡衡，一一般般情情况况下下，等等量量的的RGB产生灰色。产生灰色。n色彩平衡色彩平衡：纠正偏色的过程叫作色彩平衡。：纠正偏色的过程叫作色彩平衡。色色彩彩平平衡衡的的实实现现，是是通通过过调调整整灰灰平平衡衡，使使偏偏色区域，恢复成灰色来达到的。色区域，恢复成灰色来达到的。彩色图像增强几个定义彩色图像增强几个定义1）检检查查图图像像的的灰灰平平衡衡情情况况，即即检检查查在在现现实实中中应应该该是是灰色的物体，在图像中是否是灰色灰色的物体，在图像中是否是灰色例如：某黑色区域的平均取值是：例如：某黑色区域的平均取值是：R=0，G=12，B=7 说明有青色色偏。说明有青色色偏。2)检检查查高高饱饱和和度度的的颜颜色色是是否否正正常常，即即检检查查在在现现实实中中应该是纯色的物体，在图像中是否有偏色应该是纯色的物体，在图像中是否有偏色如何判断彩色图像的偏色如何判断彩色图像的偏色选择两个颜色分量选择两个颜色分量(如如GB)，去匹配第三个，去匹配第三个(如如R)（1）在在图图像像中中选选取取两两个个浅浅灰灰或或深深灰灰区区域域（这这 些区域也许已经不是灰色）些区域也许已经不是灰色）（2）计算这两个域的）计算这两个域的RGB平均值，获得平均值，获得 两个颜色分量的线性变换两个颜色分量的线性变换（3）将将逆逆变变换换作作用用在在图图像像的的两两个个分分量量上上，得得 到平衡后的新图像到平衡后的新图像彩色平衡实现的算法彩色平衡实现的算法设：在图像中选取两个浅灰或深灰区域，并计算设：在图像中选取两个浅灰或深灰区域，并计算这两个域的这两个域的RGB平均值，得：平均值，得：R1=25；G1=31；B1=37 R2=75；G2=79；B2=77 调整调整G、B去匹配去匹配R。从而有线性变换。从而有线性变换G:31(25);79(75)B:37(25);77(75)彩色平衡实现的算法举例彩色平衡实现的算法举例255312550255772557579075253725G G的逆变换的逆变换B B的逆变换的逆变换彩色平衡实现的算法举例彩色平衡实现的算法举例彩色图像增强：彩色图像增强：在在HSI模型上增强模型上增强n在在HSI模型上增强模型上增强n通过色调进行处理通过色调进行处理n通过亮度进行处理通过亮度进行处理n通过颜色饱和度进行处理通过颜色饱和度进行处理n基本思想基本思想n将图像转换到将图像转换到HSI色空间色空间n对指定色调值对指定色调值H进行调整，进行调整，H=H+/-hn主要应用主要应用n改改变变图图像像的的气气氛氛（如如暖暖色色和和冷冷色色的的气气氛氛变变化化，早晚气氛的变化）早晚气氛的变化）n换色（对指定色调的颜色进行更换）、去色换色（对指定色调的颜色进行更换）、去色HSI模型增强：模型增强：通过色调进行处理通过色调进行处理n基本思想基本思想n将图像转换到将图像转换到HSI色空间色空间n对指定亮度值对指定亮度值I，乘上一个调整量，乘上一个调整量 II=I*In主要应用主要应用:1）我们可以通过在每个象素的亮度分量上乘一）我们可以通过在每个象素的亮度分量上乘一个大于个大于1的常量（如的常量（如1.3），使得图像变得更明），使得图像变得更明亮，提高图像的亮度。亮，提高图像的亮度。HSI模型增强：模型增强：通过亮度进行处理通过亮度进行处理n主要应用主要应用:(1)我我们们可可以以通通过过在在每每个个象象素素的的亮亮度度分分量量上上乘乘一一个个小小于于1的的常常量量（如如0.8），使使得得图图像像的亮度降低。的亮度降低。(2)我我们们可可以以有有选选择择地地调调整整图图像像的的亮亮度度，可可以以以以色色调调、选选区区作作为为是是否否进进行行亮亮度度处处理理的的根据。例如只对红色调提高亮度。根据。例如只对红色调提高亮度。(3)对亮度分量进行直方图均衡化对亮度分量进行直方图均衡化在在HSI模型上增强模型上增强主要应用主要应用n基本思想基本思想n将图像转换到将图像转换到HSI色空间色空间n对指定亮度值对指定亮度值S，乘上一个量，乘上一个量 SS=S*Sn主要应用主要应用:(1)我我们们可可以以通通过过在在每每个个象象素素的的饱饱和和度度分分量量上上乘乘一一个个大大于于1的的常常量量（如如1.3），使使得得图图像像的的颜色更为鲜明。颜色更为鲜明。通过颜色饱和度进行处理通过颜色饱和度进行处理n主要应用主要应用:(1)我我们们可可以以通通过过在在每每个个象象素素的的饱饱和和度度分分量量上上乘乘一一个个小小于于1的的常常量量（如如0.8），使使得得图图像像的颜色的鲜明度降低。的颜色的鲜明度降低。(2)我我们们可可以以有有选选择择地地调调整整图图像像的的颜颜色色饱饱和和度度，可可以以以以色色调调、选选区区作作为为是是否否进进行行饱饱和和度度处处理的根据。例如只对红色调提高饱和度理的根据。例如只对红色调提高饱和度。通过颜色饱和度进行处理通过颜色饱和度进行处理应用应用