opencv图像翻转pythonpython+OpenCV反投影图像的实现示

目录

• 一、前言
• 二、什么是反投影图像
• 三、反投影图像的概念
• 四、反向投影的职业原理
• 一、利用反向投影backproject查找特征的大致流程：
• 二、具体细化的流程
• 三、计算经过示例
• 五、反向投影需注意的细节
• 六、代码编写

一、前言

如果对直方图或者直方图均衡化的概念比较模糊的话，建议先了解直方图的基本原理及概念：

python+OpenCv笔记（十二）：直方图（灰度直方图、掩膜的应用、直方图均衡化、自适应直方图均衡化）

二、什么是反投影图像

我们先不谈反投影图像抽象的概念，可以先用示例做一个简单且清晰的了解：

1.

例如，现在有一张手掌的图片，我们对其进行直方图绘制（假设bins设置为4），如图：

这是之前做过的一个示例，而且很容易领会，直方图中清晰地展示了如果将灰度0~255划分为4个区间（bins），那么这张手掌灰度图按照这4个区间划分都有几许个像素点，这就是图像到直方图的一个经过。

反投影图像恰恰是这一步的逆经过，即通过直方图又生成了一张图像，但生成的图像只有4种颜色（即直方图有几许个bins，生成的反投影图像就有几许种颜色），比如说原图中某一块区域的灰度值都在0到20这个区间内，如果bins=4，那么反投影图像中那一块区域的颜色是同一种颜色。

并且，一个bins（区间）内像素越多，在反投影图像中呈现出的颜色就越亮，反之越暗。

现在，我们设置bins=12，在代码中运行的结局如下：

归一化后的直方图：

反投影图像：

由上面可知，反投影图像由12种灰度值组成，且落在同一个区间内的像素值越多，那么反投影后原区域就会越亮，比如整个手掌部分由于灰度值接近，且像素很多，那么反投影后手掌部分就会变得很亮，像素点很少的bins反投影后甚至会呈现黑色。

（注：由于示例缘故，直方图中很多bins的像素点数为0，因此反投影后的图像看起来不像是由12种灰度值组成，其实是由于那些区间并不存在像素点）

2.

然而，反投影图像更常见的用途是查找特征，在meanshift算法中会用到。

比如说我们现在有模板图像以及生成的模板图像的直方图（见上），我们需要在原图像中用上面的结局来检测特征，先看一下结局：

在原图像中反投影后：

可以看到，一个手掌已经被清晰地展现了出来。

使用统计学的语言, 新图像中储存的数值代表了测试图像中该像素属于皮肤区域的概率。比如以上图为例， 亮起的区域是皮肤区域的概率更大(事实确实如此),而更暗的区域则表示更低的概率(注意手掌内部和边缘的阴影影响了检测的精度)。

这其中涉及backproject算法，具体算法以及流程可以阅读后文。

划重点：

原图像————直方图————反投影图像

三、反投影图像的概念

现在，我们可以领会一下反投影图像的抽象概念：

• 反向投影是一种记录给定图像中的像素点怎样适应直方图模型像素分布的方式。
• 简单的讲， 所谓反向投影就是开头来说计算某一特征的直方图模型，接着使用模型去寻找图像中存在的该特征（即查找特征）。

四、反向投影的职业原理

一、利用反向投影backproject查找特征的大致流程：

• 输入模板图像
• 得到模板图像的直方图
• 输入源图像，依据源图像的每个像素的值，在模板图像的直方图中找到对应的值，接着将直方图的值赋给新的图像

二、具体细化的流程

直方图反向投影流程

三、计算经过示例

（1）模板灰度图像的矩阵如下：

（2）模板灰度图像的直方图为：

bin指定的区间为：[0,3), [4,7), [8,11), [12,16)

Histogram = 4 4 6 2

（3）反向投影图为的矩阵为：

例如位置（0,0）上的像素值为0，对应的bin为[0,3), 因此反向直方图在该位置上的值为这个bin的值4。

五、反向投影需注意的细节

• 反投影图像能够在图像内定位感兴趣的对象，同时反投影图像总是单通道图像，其中每一个像素的值都是从直方图中其对应的bin获取的。
• 生成的反投影图像实际上是一张概率图。
• 输入的原图像需要转换为HSV颜色空间，接着方可计算直方图，同时由于一般的直方图的bin很容易溢出0到255，因此在计算反投影之前，需要对直方图的结局进行标准化，将所有值缩放到从最小值0到最大值255的范围内，用到的是cv2.normalize()函数。
• 再重复一次，必须在calBackProject函数之前调用该函数。
• 为什么使用HSV颜色空间？
• 例如，对于一张还有红玫瑰的图像，在RGB图像中，我们不能只根据一个阈值滤除红色通道，由于它可能太亮或太暗。但它仍然可能是红色的不同阴影。另外，可能想要考虑与红色极其相似的颜色，以确保尽可能精确的得到玫瑰。在这种情况下，以及在需要处理颜色的类似情况下，最好是用色调、饱和度、值（三者简称HSV）颜色空间，其中颜色保存在单个通道（hue 或 h 通道）中。
• 在HSV颜色空间中，色调单独负责每一个像素的颜色，饱和度和值通道可以用来得到相同颜色的更亮（使用饱和度通道）和更暗（使用值通道）的变化。
• 另外与RGB不同，色调是0~360之间的值，这是由于色调被建模为一个圆，因此只要其值溢出，颜色就会回到起点。
• 然而在open CV中，色调通常除以2以满足8位（除非我们使用16或更多位）的像素数据，因此颜色的值在0~180之间变化。

六、代码编写

import cv2 as cvimport matplotlib.pyplot as pltimport numpy as np 输入模板图像与原图像src = cv.imread(“E:\hand.jpg”)img = src.copy()src2 = cv.imread(“E:\hand2.jpg”)img2 = src2.copy() 计算直方图 转换色彩空间hsv_roi = cv.cvtColor(img, cv.COLOR_BGR2HSV) 计算直方图roi_hist = cv.calcHist([hsv_roi], [0], None, [13], [0, 180]) 归一化cv.normalize(roi_hist, roi_hist, 0, 255, cv.NORM_MINMAX) 原图像转换色彩空间hsv_roi2 = cv.cvtColor(img2, cv.COLOR_BGR2HSV) 反投影dst = cv.calcBackProject([hsv_roi2], [0], roi_hist, [0, 255], 1) 显示图像plt.figure(figsize=(10, 6), dpi=100)plt.plot(roi_hist)plt.grid()plt.show()cv.imshow(“backProject”, dst)cv.waitKey(0)

模板图像与原图像：

模板图像的直方图：

在原图像中检测的特征：

到此这篇关于python+OpenCV反投影图像的文章就介绍到这了,更多相关python OpenCV反投影内容请搜索风君子博客以前的文章或继续浏览下面的相关文章希望大家以后多多支持风君子博客！

无论兄弟们可能感兴趣的文章:

• PythonOpenCV图像复原的实现步骤
• PythonOpenCV图像的位运算操作
• PythonOpenCV使用阈值技巧进行图像处理
• OpenCV-Python给图像去除水印多种技巧
• Python使用OpenCV转换图像大致
• Python应用案例之利用opencv实现图像匹配