matlab - 在 MATLAB 中使用颜色直方图进行基于内容的图像检索和精确调用图

Question

到目前为止，我已经能够在 CBIR 系统中为灰度图像绘制 Precision-Recall 图。但是，我想知道如何对 RGB 图像执行相同的处理。

我的代码:

Inp1=rgb2gray(imread('D:\visionImages\c1\1.ppm'));
figure, imshow(Inp1), title('Input image 1');
num_bins = 32;
A = imhist(Inp1, num_bins);
srcFiles = dir('D:\visionImages\c1\*.ppm');  
B = zeros(num_bins, 30); 
ptr=1;
for i = 1 : length(srcFiles)
    filename = strcat('D:\visionImages\c1\',srcFiles(i).name);
    I = imread(filename);
    I=rgb2gray(I);
    B(:,ptr) = imhist(I, num_bins); 
    ptr=ptr+1;                                                      
end

% histogram intersection
a = size(A,2); b = size(B,2); 
K = zeros(a, b);
for i = 1:a
  Va = repmat(A(:,i),1,b);
  K(i,:) = 0.5*sum(Va + B - abs(Va - B));
end

num_images = 30;
sims=K
relevant_IDs = [1 2 3 4 5 6 7 8 9 10];
num_relevant_images = numel(relevant_IDs);
[sorted_sims, locs] = sort(sims, 'descend');
locations_final = arrayfun(@(x) find(locs == x, 1), relevant_IDs)
locations_sorted = sort(locations_final)
precision = (1:num_relevant_images) ./ locations_sorted;
recall = (1:num_relevant_images) / num_relevant_images;
plot(recall, precision, 'b.-');
xlabel('Recall');
ylabel('Precision');
title('Precision-Recall Graph');
axis([0 1 0 1.05]); 
grid;

Answer 1

您编写的代码正在比较图像之间的直方图，前提是它们是灰度的。如果要对 RGB 图像执行此操作，则需要确定每个平面需要多少个 bin。执行此操作后，对于您拥有的每个 RGB 颜色三元组，您将确定一个线性一维索引，这样它基本上就像一个普通的一维直方图。执行此操作后，您可以按照上面指定的相同方式使用上面的代码。因此，让我们创建一个函数 imcolourhist 来获取图像以及所需的红色、绿色和蓝色 bin 的总数。请记住，您不能为每个维度指定 256 个 bin。这不仅过于细化而没有任何辨别力，而且您需要 2^24 = 16777216 内存位置，MATLAB 肯定会给您一个内存不足的错误。

一般程序是确定每种颜色独立属于哪个 bin。执行此操作后，您将创建一个线性一维索引，它本质上是一维直方图的容器，然后在该位置递增该值。我要使用 accumarray为我计算直方图。完成后，这实际上将替换您的 imhist 调用，您将对从 imcolourhist 输出的直方图执行直方图交集。

function [out] = imcolourhist(im, num_red_bins, num_green_bins, num_blue_bins)

    im = double(im); %// To maintain precision

    %// Compute total number of bins
    total_bins = num_red_bins*num_green_bins*num_blue_bins;

    %// Figure out threshold between bins
    red_level = 256 / num_red_bins;
    green_level = 256 / num_green_bins;
    blue_level = 256 / num_blue_bins;

    %// Calculate which bins for each colour plane
    %// each pixel belongs to
    im_red_levels = floor(im(:,:,1) / red_level);
    im_green_levels = floor(im(:,:,2) / green_level);
    im_blue_levels = floor(im(:,:,3) / blue_level);

    %// Compute linear indices
    ind = im_blue_levels*num_red_bins*num_green_bins + im_green_levels*num_red_bins + im_red_levels;
    ind = ind(:); %// Make column vector for accumarray

    %// Determine 1D histogram - Ensure that every histogram
    %// generated has the same size of total_bins x 1
    out = accumarray(ind+1, 1, [total_bins 1]);
end

---

获取此代码，将其复制并粘贴到一个新文件中，然后将其另存为 imcolourhist.m。确保将此代码保存在与您向我们展示的上述代码相同的目录中。请注意，在 accumarray 中，我将线性索引偏移 1，因为我生成的线性索引将从 0 开始，但 MATLAB 从 1< 开始索引。现在，您现在要做的就是用 imcolourhist 替换您的 imhist 调用。我建议您暂时将每个颜色 channel 的 bins 选择为 8(即 num_red_bins = num_green_bins = num_blue_bins = 8。您必须尝试一下才能获得好的结果。

因此，您可以将计算 A 直方图的代码更改为:

Inp1=imread('D:\visionImages\c1\1.ppm');  
num_red_bins = 8;
num_green_bins = 8;
num_blue_bins = 8;
num_bins = num_red_bins*num_green_bins*num_blue_bins;
A = imcolourhist(Inp1, num_red_bins, num_green_bins, num_blue_bins);

请注意，我正在以颜色 的形式读取图像，因此删除了rgb2gray 调用。同样，对于 B，您可以:

B = zeros(num_bins, 30); 
ptr=1;
for i = 1 : length(srcFiles)
    filename = strcat('D:\visionImages\c1\',srcFiles(i).name);
    I = imread(filename);
    B(:,ptr) = imcolourhist(I, num_red_bins, num_green_bins, num_blue_bins); 
    ptr=ptr+1;                                                      
end

请注意，我不能保证这里会有好的结果。因为您只使用颜色直方图作为图像检索的方法，所以您可能有一个查询图像和一个数据库图像，它们可能具有相同的颜色分布，但在纹理和成分方面看起来完全不同。如果这两个图像具有相同的颜色分布，则这些将被视为高度相似，即使它们看起来完全不同。

---

祝你好运!