图像卷积概念
图像卷积操作(convolution),或称为核操作(kernel),是进行图像处理的一种常用手段,
图像卷积操作的目的是利用像素点和其邻域像素之前的空间关系,通过加权求和的操作,实现模糊(blurring),锐化(sharpening),边缘检测(edge detection)等功能。
图像卷积的计算过程就是卷积核按步长对图像局部像素块进行加权求和的过程。
卷积核实质上是一个固定大小的权重数组,该数组中的锚点通常位于中心。
卷积核大小
通常情况下,选取卷积核大小为1x1,3x3,5x5,7x7等
取奇数大小的目的是为了设置卷积核中心为锚点,方便卷积核和图像的对齐处理
设置卷积核大小对称的目的是为了在空间域中充分利用像素点和其领域像素间的关系。当然这不是必须的,如果需要针对某一轴进行处理,可以设置1x3或3x1大小。
参考:
convolution
kernel (image processing)
图像卷积数学公式
二维离散卷积公式如下:
图像卷积通常使用这个公式,其中g[x,y]g[x,y]g[x,y]为卷积核,符号∗ast∗表示卷积操作
图形化表示
以一维离散卷积公式为例:
其图形化公式如下:
首先将函数 g(τ) 反射为 g(−τ) ,相当于 g(τ) 沿yyy轴翻转
再对函数 g(−τ) 添加一个时间偏移量 t ,它允许函数 g(t−τ) 沿着 τ 轴移动
变量 t 每增加 1,表示函数 g(t−τ) 向左移动一步
计算 t 遍历 −∞ 到 ∞ 的过程中,函数 f(τ) 和 g(t−τ) 的重叠面积
举例
函数 f = [1,2,3,4] ,函数 g = [1,3,2]
将函数 g 逆转:g(τ) → g(−τ),值变为[2,3,1]
计算过程如下:
h(0)=[1]⋅[1]=1⋅1=1
h(1)=[1,2]⋅[3,1]=1⋅3+2⋅1=3+2=5
h(2)=[1,2,3]⋅[2,3,1]=1⋅2+2⋅3+3⋅1=2+6+3=11
h(3)=[2,3,4]⋅[2,3,1]=2⋅2+3⋅3+4⋅1=4+9+4=17
h(4)=[3,4]⋅[2,3]=3⋅2+4⋅3=6+12=18
h(5)=[4]⋅[2]=4⋅2=8
h(x)=[1,5,11,17,18,8]
以此类推可知二维离散卷积的计算过程,先对角翻转卷积核,在逐步向两个正方向移动,计算重叠面积
flip the mask (horizontally and vertically) only once(水平和垂直翻转掩模一次)
slide the mask onto the image(在图像上滑动掩模)
multiply the corresponding elements and then add them(将相应的元素相乘,然后求和)
repeat this procedure until all values of the image has been calculated(重复这一过程,直到所有图像值均已被计算)
多说一句,关于信号与系统中的lti(linear time-invariant systems,线性时不变系统)和lsi(linear shift invariant system,线性位移不变系统)的不变性一直没太理解,图形化理解就是信号(函数)可以随着时间/空间移动而不改变它的原先的形状,就像卷积核一样。
图像卷积注意事项
在进行卷积操作时,需要注意两点
卷积核归一化
卷积核的大小和值可以根据要求定义,但通常会将整个卷积核进行归一化操作,其目的是为了保证修改后结果图像的平均元素值和原始图像平均元素值一样。
因为卷积操作满足齐次性,所以可以卷积计算完成后再除以整个卷积核的值。
数值精度
图像数值类型通常为uint8,在进行卷积操作时很容易造成数值溢出,所以在进行操作之前可以先转换成更高精度的数值类型
智能手机读懂人的行为
如今5G商用都一年了,为何还有这么大的影响力?
全景AI万物互联,开启了一个智慧时代
5G或许害了iPhone 12?
诺基亚Lumia900港行4月开卖
图像卷积操作的两点注意事项
智能网联汽车发展加速 BAT各自总结智能网联汽车领域成果
适合运动使用的降噪耳机有哪些?好用的降噪耳机测评
什么是片式电阻器?它具有什么特性?
一名软件工程师的两年工作经历
MobTech袤博科技通过中国信通院“安全专项评测”
如何判断扫地机器人好不好用_扫地机器人好不好只需看3点
构思新颖的共振演示装置
Cortex-A7核心板LGA封装版本发布
IC Insights公布了2020年上半年全球十大半导体销售排名
华为荣耀9和荣耀v9买哪个比较好?荣耀9和荣耀v9区别对比联系
华为OpenLife开发者大赛获奖产品告诉你,智慧家庭的刚需在哪里?
麒麟9000是5g芯片吗?麒麟9000相当于骁龙多少
诺基亚新一代旗舰智能手机9 PureView曝光后置将有5个摄像头
中国又创世界新纪录350公里时速415米世界最长编组高铁