Mat – 图像的容器
在对图像进行处理时,首先需要将图像载入到内存中,而Mat就是图像在内存中的容器,管理着图像在内存中的数据。Mat是C++ 的一个类,由于OpenCV2中引入了内存自动管理机制,所以不必手动的为Mat开辟内存空间以及手动的释放内存。Mat中包含的数据主要由两个部分构成:矩阵头(矩阵尺寸、存储方法、存储地址等信息)和一个指向存储图像所有像素值的矩阵(根据所选的存储方法不同的矩阵可以是不同的维数)的指针。
在图像处理中,对图像的处理不可能是在一个函数中完成的,这就需要在不同的函数间传递Mat。同时,图像处理的计算量是很大,除非万不得已就不要去传递比较大的Mat。这就要求使用某种机制来实现Mat的快速传递。Mat中主要有矩阵头和一个指向矩阵的指针,矩阵头是一个常数值,但是矩阵保存了图像所有的像素值,通常会比矩阵头大几个数量级,因此传递Mat是主要的消耗是在矩阵复制上。为了解决这个问题,OpenCV中引入了计数机制。每个Mat都有自己的信息头,但是共享同一个矩阵,也就是在传递Mat时,只复制矩阵头和指向矩阵的指针。
1: Mat a,c ;
2: a = imread("d:\\test.jpg",1) ;
3: Mat b(a) ; //拷贝构造函数
4: a = c ; //复制运算符
上面代码中3个Mat对象a,b,c指向同一个矩阵,由于都指向了同一个矩阵,某一个对象对矩阵进行操作时也会影响到其他对象读取到的矩阵。
多个对象同时使用一个矩阵,那么当不需要该矩阵时,谁来负责清理?简单的回答是,最后一个使用它的对象。通过引用计数机制,无论什么时候Mat对象的信息头被复制了,都会增加矩阵的引用次数加1;反之,当一个Mat的信息头被释放后,引用计数就会被减1;当计数被减到0时,矩阵就会被释放。
当然,有些时候还是需要拷贝矩阵本身的,这时候可以使用clone和 copyTo。通过clone和copyTo创建的Mat,都有自己的矩阵,修改其中一个的矩阵不会对其他的造成影响。
访问像素的三种方法
对图像像素值的访问是图像处理最基本的要求,在OpenCV中提供了三种方式来访问图像的像素值。
矩阵在内存中的存储
首先来看一下图像像素值在内存中的保存方式。前面提到,像素值是以矩阵的方式保存的,矩阵的大小取决于图像采用的颜色模型,确切的说是图像的通道数。如果是灰度图像,矩阵是这样的:
矩阵的每一个元素代表一个像素 值。而对多通道图像来说,一个像素值需要多个矩阵元素来存储,矩阵中的列会包含多个子列,其子列数和通道数目相等。以常见的RGB模型来说:
而且,如果内存比较大,图像中的各行各列就可以一行一行的连接起来,形成一个长行。连续存储有助于提升图像的扫描速度,使用iscontinuous来判断矩阵是否是连续存储的。
颜色空间缩减
如果矩阵元素存储的是单通道像素,使用8位无符号来保存每个元素,那么像素可能有256个不同的值。如果是三通道的话,就会用一千六百多种颜色。如此多的颜色在有些时候不是必须的,而且会对算法的性能造成严重的影响。在这种情况下,最常用的做法就是颜色空间的缩减,也就是将现有的颜色空间进行映射,以获得较少的颜色数。例如:颜色值0到9映射为0,10到19映射为10,以此类推。
以简单颜色空间缩减为例,使用OpenCV提供的三种方式来遍历图像像素。将各个颜色值映射关系存储到表中,在对格像素的颜色值进行处理时,直接进行查表。下面是对映射表的初始化:
1:
2: uchar table[256] ;
3: int divideWith = 10;
4: for(int i = 0 ; i < 256 ; i ++)
5: table[i] = (uchar) ( divideWith * (i / divideWith));
这里将各个像素的颜色值整除以10,然后再乘以10,这样会像上面所说的将0到9的颜色值映射为0,10到19的颜色值映射为10,以此类推。
指针遍历图像 Efficient Way
1: Mat& scanImageWithPointer(Mat &img , const uchar * const table)
2: {
3: CV_Assert(img.depth () == sizeof(uchar));
4:
5: int channels = img.channels() ;
6:
7: int rows = img.rows * channels;
8: int cols = img.cols ;
9:
10: if(img.isContinuous()) {
11: cols *= rows ;
12: rows = 1 ;
13: }
14:
15: uchar * p ;
16: for(int i = 0 ; i < rows ; i ++){
17: p = img.ptr<uchar>(i);
18: for(int j = 0 ; j < cols ; j ++){
19: p[j] = table[p[j]] ;
20: }
21: }
22: return img ;
23: }
首先使用断言,只处理使用8位无符号数保存元素值的矩阵。然后在取出举证的行数和列数,如果是多通道的话矩阵是有子列的,用通道数乘以矩阵的行数作为最终遍历时行数。另外,调用isContinuous来判断矩阵在内存中是不是连续存储的。p = img.ptr<uchar>(i); 来获取每一行开始处的指针,然后遍历至改行的末尾。如果是连续存储的,就只需要获取一次每行的开始指针,一路遍历下去即可。
Mat中的data字段会返回指向矩阵第一行第一列的指针,通过可以使用该字段来检查图像是否被载入成功了。当矩阵是连续存储时,也可以通过data来遍历整个图像。
1: uchar * p = img.data ;
2: for(unsigned int i = 0 ; i < img.rows * img.cols * img.channels() ; i ++)
3: *p ++ = table[*p] ;
但是这种代码可读性差,并且进一步操作困难,其在性能上的表现并不明显的优于上面的方法。
迭代遍历图像 Safe Method
1: Mat& scanImageWithIterator(Mat &img,const uchar * const table)
2: {
3: CV_Assert(img.depth () == sizeof(uchar));
4:
5: const int channels = img.channels() ;
6:
7: switch (channels){
8: case 1:
9: {
10: MatIterator_<uchar> it,end ;
11: end = img.end<uchar>() ;
12: for(it = img.begin<uchar>(); it != end ; it ++) {
13: *it = table[*it] ;
14: }
15: break ;
16: }
17: case 2:
18: {
19: MatIterator_<Vec3b> it,end ;
20: end = img.end<Vec3b>() ;
21: for(it = img.begin<Vec3b>(); it != end ; it ++) {
22: (*it)[0] = table[(*it)[0]] ;
23: (*it)[1] = table[(*it)[1]] ;
24: (*it)[2] = table[(*it)[2]] ;
25: }
26: break ;
27: }
28: }
29: return img ;
30: }
有两种方式来获取图像矩阵的迭代器
1: cv::MatIterator_<cv::Vec3b> it = image.begin<cv::Vec3b>();
2: cv::Mat_<cv::Vec3b>::iterator it = image.begin<cv::Vec3b>();
同样的获取图像的常量迭代器也有两种方式
1: cv::MatConstIterator_<cv::Vec3b> it = image.begin<cv::Vec3b>();
2: cv::Mat_<cv::Vec3b>::const_iterator end = image.end<cv::Vec3b>();
另外需要注意的就是,对于多通道图像(例如三通道),每列中有3个uchar元素,也就是一个有3个元素的vector,在OpenCV中使用Vec3b来命名。如果要访问第n个子列,只需要使用[]来操作就可以了。而且,OpenCV迭代中扫过一行的所有列后会自动的跳到下一列,所以在RGB中如果使用uchar来进行迭代不实用Vec3b的话只能获取到B通道的值。
at<>遍历图像
这种方法不推荐用来遍历图像,它主要用来获取或更改图像的中随机元素的。基本用途是用来访问特定的矩阵元素(知道行数和列数)
1: Mat& scanImageWithAt(Mat& img,const uchar * const table)
2: {
3: CV_Assert(img.depth () == sizeof(uchar));
4: const int channels = img.channels() ;
5:
6: switch (channels){
7: case 1:
8: {
9: for (int i = 0 ; i < img.rows ; i ++)
10: for(int j = 0 ; j < img.cols ; j ++)
11: img.at<uchar>(i,j) = table[img.at<uchar>(i,j)] ;
12: break ;
13: }
14: case 2:
15: {
16: Mat_<Vec3b> I = img ;
17: for(int i = 0 ; i < I.rows ; i ++){
18: for(int j = 0 ; j < I.cols ; j ++){
19: I(i,j)[0] = table[I(i,j)[0]] ;
20: I(i,j)[1] = table[I(i,j)[1]] ;
21: I(i,j)[2] = table[I(i,j)[2]] ;
22: }
23: }
24: img = I ;
25: break ;
26: }
27: }
28: return img ;
29: }
在Mat种保存矩阵元素的数据类型是很重要的,Mat类中也提供了很多的模板方法来处理不同的矩阵元素类型,这种灵活性却会使得简单的代码复杂化,因此就有了Mat_模板类来简化操作。也就是说如果知道了Mat的矩阵元素的数据类型,就可以将其转换为Mat_模板类来简化代码。 前面提到,at<>主要是用来访问矩阵的随机元素的,下面使用该方法来给一张图像添加椒盐噪声。
1: //n添加椒盐噪声的个数
2: void salt(Mat& img,int n)
3: {
4: for(int k = 0 ; k < n ; k ++) {
5: int i = rand() % img.rows ;
6: int j = rand() % img.cols ;
7:
8: if(img.channels() == 1){
9: img.at<uchar>(i,j) = 255 ;
10: }else if(img.channels() == 3){
11: img.at<Vec3b>(i,j)[0] = 255 ;
12: img.at<Vec3b>(i,j)[1] = 255 ;
13: img.at<Vec3b>(i,j)[2] = 255 ;
14: }
15: }
16: }
lenna图片添加椒盐噪声后
这里要提下,在使用imshow将Mat显示到命名窗口时,需要调用waitkey()这个函数下,不然的话在命名窗口显示不出来。
LUT
在图像处理中,对图像的所有像素重新映射是很常见的,在OpenCV中提供一个函数来实现该该操作,不需要去扫描整个图像,operation on array :LUT。
1: Mat lookupTable(1,256,CV_8S);
2: uchar *p = lookupTable.data ;
3: for(int i = 0 ; i < 256 ; i ++)
4: p[i] = table[i] ;
5:
6: Mat result ;
7: LUT(img,lookupTable,result) ;
void LUT(InputArray src, InputArray lut, OutputArray dst)
转载于:https://www.cnblogs.com/wangguchangqing/p/3660623.html