Поиск Поворота и Масштаба Изображения с Помощью Автоматического Сопоставления Объектов

В этом примере показано, как автоматически определить геометрическое преобразование между парой изображений. Когда одно изображение будет искажено относительно другого попеременно и шкалы, используйте detectSURFFeatures и estimateGeometricTransform2D найти угол поворота и масштабный коэффициент. Можно затем преобразовать искаженное изображение, чтобы восстановить оригинальное изображение.

Шаг 1: Readimage

Принесите изображение в рабочую область.

original = imread('cameraman.tif');
imshow(original);
text(size(original,2),size(original,1)+15, ...
    'Image courtesy of Massachusetts Institute of Technology', ...
    'FontSize',7,'HorizontalAlignment','right');

Шаг 2: измените размер и вращайте изображение

scale = 0.7;
J = imresize(original, scale); % Try varying the scale factor.

theta = 30;
distorted = imrotate(J,theta); % Try varying the angle, theta.
figure, imshow(distorted)

Можно экспериментировать путем варьирования шкалы и вращения входного изображения. Однако обратите внимание, что существует ограничение на величину, которую вы можете изменить масштаб, прежде чем анализатор не найдет достаточное количество признаков.

Шаг 3: найдите соответствие с функциями между изображениями

Обнаружение особенностей на обоих изображениях.

ptsOriginal  = detectSURFFeatures(original);
ptsDistorted = detectSURFFeatures(distorted);

Извлеките дескрипторы функции.

[featuresOriginal,  validPtsOriginal]  = extractFeatures(original,  ptsOriginal);
[featuresDistorted, validPtsDistorted] = extractFeatures(distorted, ptsDistorted);

Совпадайте с функциями при помощи их дескрипторов.

indexPairs = matchFeatures(featuresOriginal, featuresDistorted);

Получите местоположения соответствующих точек для каждого изображения.

matchedOriginal  = validPtsOriginal(indexPairs(:,1));
matchedDistorted = validPtsDistorted(indexPairs(:,2));

Покажите предполагаемые соответствия точки.

figure;
showMatchedFeatures(original,distorted,matchedOriginal,matchedDistorted);
title('Putatively matched points (including outliers)');

Шаг 4: оцените преобразование

Найдите преобразование, соответствующее совпадающим парам точек, используя статистически надежный алгоритм M-estimator SAmple Consensus (MSAC), который является вариантом алгоритма RANSAC. Он удаляет ненужное при вычислении матрицы преобразования. Вы можете увидеть различные результаты вычисления преобразования из-за случайной выборки, используемой алгоритмом MSAC.

[tform, inlierIdx] = estimateGeometricTransform2D(...
    matchedDistorted, matchedOriginal, 'similarity');
inlierDistorted = matchedDistorted(inlierIdx, :);
inlierOriginal  = matchedOriginal(inlierIdx, :);

Отобразите соответствие с парами точки, используемыми в расчете преобразования.

figure;
showMatchedFeatures(original,distorted,inlierOriginal,inlierDistorted);
title('Matching points (inliers only)');
legend('ptsOriginal','ptsDistorted');

Шаг 5: решите для шкалы и угла

Используйте геометрическое преобразование, tform, чтобы восстановить шкалу и угол. Поскольку мы вычислили преобразование от искаженного до оригинального изображения, мы должны вычислить его инверсию, чтобы восстановить искажение.

Let sc = s*cos(theta)
Let ss = s*sin(theta)
Then, Tinv = [sc -ss  0;
              ss  sc  0;
              tx  ty  1]
where tx and ty are x and y translations, respectively.

Вычислите обратную матрицу преобразования.

Tinv  = tform.invert.T;

ss = Tinv(2,1);
sc = Tinv(1,1);
scaleRecovered = sqrt(ss*ss + sc*sc)
thetaRecovered = atan2(ss,sc)*180/pi
scaleRecovered =

  single

    0.7010


thetaRecovered =

  single

   30.2351

Восстановленные значения должны совпадать с вашей шкалой и угловыми значениями, выбранными на Шаге 2: Измените размер и Вращайте Изображение.

Шаг 6: восстановите оригинальное изображение

Восстановите оригинальное изображение путем преобразования искаженного изображения.

outputView = imref2d(size(original));
recovered  = imwarp(distorted,tform,'OutputView',outputView);

Сравните recovered к original путем рассмотрения их рядом друг с другом в монтаже.

figure, imshowpair(original,recovered,'montage')

recovered (справа) качество изображения не совпадает с original (слева) отобразите из-за процесса искажения и восстановления. В частности, изображение, уменьшая потерю причин информации. Артефакты вокруг ребер происходят из-за ограниченной точности преобразования. Если необходимо было обнаружить больше точек на Шаге 3: Найдите, что Соответствие Показывает Между Изображениями, преобразование было бы более точным. Например, мы, возможно, использовали угловой детектор, detectFASTFeatures, чтобы дополнить анализатор SURF, который находит блобы. Содержимое изображения и размер изображения также влияют на количество обнаруженных признаков.