estimateCameraMatrix

Оцените матрицу проекции камеры от соответствий точки мира к изображению

свернуть все на странице

Синтаксис

camMatrix = estimateCameraMatrix(imagePoints,worldPoints)
[camMatrix,reprojectionErrors] = estimateCameraMatrix(imagePoints,worldPoints)

Описание

camMatrix = estimateCameraMatrix(imagePoints,worldPoints) возвращает матрицу проекции камеры, определенную из известных мировых точек и их соответствующих проекций изображений при помощи подхода прямого линейного преобразования (DLT).

пример

[camMatrix,reprojectionErrors] = estimateCameraMatrix(imagePoints,worldPoints) также возвращает ошибку перепроекции, которая определяет количество точности спроектированных координат изображений.

Примеры

свернуть все

Скрипт Open Live Script

Загрузите 3-D данные об облаке точек, собранные датчиком RGB-D в рабочую область.

ld = load('object3d.mat');
ptCloud = ld.ptCloud;

Удалите точки с Inf или NaN координаты от облака точек.

[validPtCloud,validIndices] = removeInvalidPoints(ptCloud);

Считайте допустимые мировые координаты точки. Каждая запись задает x, y, z координаты точки в облаке точек.

worldPoints = validPtCloud.Location;

Задайте соответствующие координаты точки изображений как ортогональную проекцию данных об облаке точек на yz-плоскость.

indices = 1:ptCloud.Count;
[y,z] = ind2sub([size(ptCloud.Location,1),size(ptCloud.Location,2)],indices);
imagePoints = [y(validIndices)' z(validIndices)'];

Сгенерируйте 2D проекцию изображений при помощи координат точки изображений и их значений цвета.

projImage = zeros(max(imagePoints(:,1)),max(imagePoints(:,2)),3);
rgb = validPtCloud.Color;
for j = 1:length(rgb)
projImage(imagePoints(j,1),imagePoints(j,2),:) = rgb(j,:);
end

Отобразите данные об облаке точек и соответствующую 2D проекцию изображений.

figure
subplot(1,2,1)
pcshow(ptCloud)
xlabel('X');
ylabel('Y');
zlabel('Z');
title('Point Cloud Data','Color',[1 1 1])
subplot(1,2,2)
imshow(uint8(projImage))
title('2-D Image Projection','Color',[1 1 1])

Figure contains 2 axes. Axes 1 with title Point Cloud Data contains an object of type scatter. Axes 2 with title 2-D Image Projection contains an object of type image.

Оцените матрицу проекции камеры и ошибку перепроекции при помощи известных мировых точек и точек изображений.

[camMatrix,reprojectionErrors] = estimateCameraMatrix(imagePoints,worldPoints);

Используйте предполагаемую матрицу проекции камеры, как введено для findNearestNeighbors функционируйте и найдите самых близких соседей точки запроса.

point = [0.4 0.3 0.2];  % Specify the query point
K = 50;    % Specify the number of nearest neighbors to be determined
[indices,dists] = findNearestNeighbors(ptCloud,point,K,camMatrix);  % Get the indices and distances of nearest neighbors

Используйте select функция, чтобы понять данные об облаке самых близких соседей.

ptCloudB = select(ptCloud,indices);

Отобразите облако точки ввода и его самых близких соседей.

figure,
pcshow(ptCloud)
hold on
pcshow(ptCloudB.Location,'ob')
hold off
legend('Point Cloud','Nearest Neighbors','Location','southoutside','Color',[1 1 1])

Figure contains an axes. The axes contains 2 objects of type scatter. These objects represent Point Cloud, Nearest Neighbors.

Входные параметры

свернуть все

Координаты проекции изображений указывают в виде M-by-2 матрицу (x, y) координаты. M является числом точек, и это должно быть больше или быть равно 6.

Примечание

  • Входные точки изображений должны соответствовать неискаженной плоскости изображения.

Типы данных: single | double

3-D мир указывает в виде M-by-3 матрицу (x, y, z) координаты. M является числом точек, и это должно быть больше или быть равно 6.

Примечание

  • Входные мировые координаты должны быть некомпланарными точками.

Типы данных: single | double

Выходные аргументы

свернуть все

Матрица проекции камеры, возвращенная как 4 3 матрица. Матрица сопоставляет 3-D мировые точки в однородных координатах к 2D координатам изображений проекций на плоскость изображения.

Типы данных: double

Ошибки перепроекции, возвращенные как M-by-1 вектор. Ошибка перепроекции является ошибкой между повторно спроектированными точками изображений и входными точками изображений. Для получения дополнительной информации о расчете ошибок перепроекции см. Алгоритмы.

Типы данных: double

Советы

Можно использовать estimateCameraMatrix функционируйте, чтобы оценить матрицу проекции камеры:

  • Если соответствия точки мира к изображению известны, и внутренние параметры камеры и параметры значений внешних параметров не известны, можно использовать cameraMatrix функция.

  • Чтобы вычислить 2D точки изображений из 3-D мировых точек, обратитесь к уравнениям в camMatrix.

  • Для использования с findNearestNeighbors объектная функция pointCloud объект. Использование матрицы проекции камеры убыстряется, самые близкие соседи ищут в облаке точек, сгенерированном датчиком RGB-D, таким как Microsoft® Kinect®.

Алгоритмы

Учитывая точки мира X и изображение указывают, что x, матрица проекции камеры C, получен путем решения уравнения

λx = C X.

Уравнение решено с помощью подхода прямого линейного преобразования (DLT) [1]. Этот подход формулирует гомогенную линейную систему уравнений, и решение получено посредством обобщенного разложения собственного значения.

Поскольку координаты точки изображений даны в пиксельных значениях, подход для вычисления матрицы проекции камеры чувствителен к числовым ошибкам. Чтобы избежать числовых ошибок, входные координаты точки изображений нормированы, так, чтобы их центроид был в начале координат. Кроме того, корневое среднеквадратическое расстояние точек изображений от источника 2. Эти шаги обобщают процесс для оценки матрицы проекции камеры.

  1. Нормируйте входные координаты точки изображений с преобразованием T.

  2. Оцените матрицу проекции камеры CN от нормированных входных точек изображений.

  3. Вычислите денормализованную матрицу проекции камеры C как CN T-1.

  4. Вычислите повторно спроектированные координаты точки изображений xE как C X.

  5. Вычислите ошибки перепроекции как

    reprojectionErrors = |x− xE |.

Ссылки

[1] Ричард, H. и А. Зиссермен. Несколько просматривают геометрию в компьютерном зрении. Кембридж: Издательство Кембриджского университета, 2000.

Смотрите также

Приложения

Объекты

Функции

Темы

Введенный в R2019a

Документация Computer Vision Toolbox

Поддержка

Для просмотра документации необходимо авторизоваться на сайте