Модель датчика fisheye-камеры в 3D среде симуляции
Automated Driving Toolbox / 3D Симуляция
Блок Simulation 3D Fisheye Camera обеспечивает интерфейс к камере с линзой подозрительного взгляда в 3D среде симуляции. Эта среда представляется с помощью Нереального Engine® от Epic Games®. Датчик основан на модели fisheye-камеры, предложенной Scaramuzza [1]. Блок выводит изображение с заданным искажением камеры и размером. Можно также вывести местоположение и ориентацию камеры в системе мировой координаты сцены.
Если вы устанавливаете Sample time на -1, блок использует шаг расчета, заданный в блоке Simulation 3D Scene Configuration. Чтобы использовать этот датчик, необходимо включать блок Simulation 3D Scene Configuration в модель.
Примечание
Блок Simulation 3D Scene Configuration должен выполниться перед блоком Simulation 3D Fisheye Camera. Тем путем Нереальный Engine, 3D среда визуализации готовит данные перед блоком Simulation 3D Fisheye Camera, получает его. Чтобы проверять порядок выполнения блока, щелкните правой кнопкой по блокам и выберите Properties. На вкладке General подтвердите эти настройки Priority:
Simulation 3D Scene Configuration — 0
Simulation 3D Fisheye Camera — 1
Для получения дополнительной информации о порядке выполнения, смотрите Как Нереальная Симуляция Engine для Автоматизированных Ведущих работ.
Sensor identifier — Уникальный идентификатор датчикаУникальный идентификатор датчика в виде положительного целого числа. В системе мультидатчика идентификатор датчика различает датчики. Когда вы добавляете новый блок датчика в свою модель, Sensor identifier того блока является N + 1. N является самым высоким значением Sensor identifier среди существующих блоков датчика в модели.
Пример 2
Parent name — Имя родительского элемента, к которому смонтирован датчикScene Origin (значение по умолчанию) | имя транспортного средстваИмя родительского элемента, к которому датчик смонтирован в виде Scene Origin или как имя транспортного средства в вашей модели. Имена транспортного средства, которые можно выбрать, соответствуют параметрам Name блоков Simulation 3D Vehicle with Ground Following в модели. Если вы выбираете Scene Origin, блок помещает датчик в начале координат сцены.
Пример: SimulinkVehicle1
Mounting location — Местоположение монтирования датчикаOrigin (значение по умолчанию) | Front bumper | Rear bumper | Right mirror | Left mirror | Rearview mirror | Hood center | Roof centerМестоположение монтирования датчика.
Когда Parent name является Scene Origin, подставки под клише датчик до начала координат сцены. Можно установить Mounting location на Origin только. В процессе моделирования датчик остается стационарным.
Когда Parent name является именем транспортного средства (например, SimulinkVehicle1) подставки под клише датчик к одному из предопределенных местоположений монтирования описаны в таблице. В процессе моделирования датчик перемещается с транспортным средством.
| Местоположение монтирования транспортного средства | Описание | Ориентация относительно источника транспортного средства [список, подача, отклонение от курса] (градус) |
|---|---|---|
Origin | Датчик по ходу движения смонтировался к источнику транспортного средства, который находится на земле в геометрическом центре транспортного средства (см. Системы координат для Нереальной Симуляции Engine в Automated Driving Toolbox),
| [0, 0, 0] |
Front bumper | Датчик по ходу движения смонтирован к переднему бамперу
| [0, 0, 0] |
Rear bumper | Назад стоящий датчик смонтирован к заднему бамперу
| [0, 0, 180] |
Right mirror | Вниз стоящий датчик смонтирован к правильному зеркалу вида сбоку
| [0, –90, 0] |
Left mirror | Вниз стоящий датчик смонтирован к левому зеркалу вида сбоку
| [0, –90, 0] |
Rearview mirror | Датчик по ходу движения смонтирован к зеркалу заднего обзора в транспортном средстве
| [0, 0, 0] |
Hood center | Датчик по ходу движения, смонтированный к центру капота
| [0, 0, 0] |
Roof center | Датчик по ходу движения, смонтированный к центру крыши
| [0, 0, 0] |
Прокрутитесь, сделайте подачу, и отклонение от курса по часовой стрелке положительно при взгляде в положительном направлении Оси X, Оси Y и оси Z, соответственно. При рассмотрении транспортного средства от верхней части вниз, угол отклонения от курса (то есть, угол ориентации) против часовой стрелки положительны, потому что вы смотрите в обратном направлении оси.
(X, Y, Z) монтирующееся местоположение датчика относительно транспортного средства зависит от типа транспортного средства. Чтобы задать тип транспортного средства, используйте параметр Type блока Simulation 3D Vehicle with Ground Following, с которым вы монтируете датчик. Получить (X, Y, Z) монтирующиеся местоположения для типа транспортного средства, смотрите страницу с описанием для того транспортного средства.
Чтобы определить местоположение датчика в мировых координатах, откройте блок датчика. Затем на вкладке Ground Truth выберите Output location (m) and orientation (rad) и смотрите данные из выходного порта Location.
Specify offset — Задайте смещение от монтирующегося местоположенияoff (значение по умолчанию) | onВыберите этот параметр, чтобы задать смещение от монтирующегося местоположения при помощи параметров Relative rotation [Roll, Pitch, Yaw] (deg) и Relative translation [X, Y, Z] (m).
Relative translation [X, Y, Z] (m) — Перевод возмещен относительно монтирующегося местоположенияСмещение перевода относительно монтирующегося местоположения датчика в виде с действительным знаком 1 3 вектор из формы [X, Y, Z]. Модули исчисляются в метрах.
Если вы монтируете датчик к транспортному средству установкой Parent name к имени того транспортного средства, то X, Y, и Z находятся в системе координат транспортного средства, где:
Ось X указывает вперед от транспортного средства.
Ось Y указывает слева от транспортного средства, как просматривается при взгляде в прямом направлении транспортного средства.
Ось Z подчеркивает.
Источник является монтирующимся местоположением, заданным в параметре Mounting location. Этот источник отличается от источника транспортного средства, который является геометрическим центром транспортного средства.
Если вы монтируете датчик к источнику сцены установкой Parent name к Scene Origin, затем X, Y, и Z находятся в мировых координатах сцены.
Для получения дополнительной информации о транспортном средстве и системах мировой координаты, смотрите Системы координат для Нереальной Симуляции Engine в Automated Driving Toolbox.
Пример: [0,0,0.01]
Чтобы включить этот параметр, выберите Specify offset.
Relative rotation [Roll, Pitch, Yaw] (deg) — Вращательное смещение относительно монтирующегося местоположенияВращательное смещение относительно монтирующегося местоположения датчика в виде с действительным знаком 1 3 вектор из формы [Список, Подача, Отклонение от курса]. Прокрутитесь, сделайте подачу, и отклонение от курса является углами вращения вокруг X-, Y-и осей Z, соответственно. Модули в градусах.
Если вы монтируете датчик к транспортному средству установкой Parent name к имени того транспортного средства, то X, Y, и Z находятся в системе координат транспортного средства, где:
Ось X указывает вперед от транспортного средства.
Ось Y указывает слева от транспортного средства, как просматривается при взгляде в прямом направлении транспортного средства.
Ось Z подчеркивает.
Прокрутитесь, сделайте подачу, и отклонение от курса по часовой стрелке положительно при взгляде в прямом направлении Оси X, Оси Y и оси Z, соответственно. Если вы просматриваете сцену из 2D нисходящей перспективы, то угол отклонения от курса (также названный углом ориентации) против часовой стрелки положителен, потому что вы просматриваете сцену в обратном направлении оси Z.
Источник является монтирующимся местоположением, заданным в параметре Mounting location. Этот источник отличается от источника транспортного средства, который является геометрическим центром транспортного средства.
Если вы монтируете датчик к источнику сцены установкой Parent name к Scene Origin, затем X, Y, и Z находятся в мировых координатах сцены.
Для получения дополнительной информации о транспортном средстве и системах мировой координаты, смотрите Системы координат для Нереальной Симуляции Engine в Automated Driving Toolbox.
Пример: [0,0,10]
Чтобы включить этот параметр, выберите Specify offset.
Sample time Размер шагаШаг расчета блока в секундах в виде положительной скалярной величины. 3D частота кадров среды симуляции является инверсией шага расчета.
Если вы устанавливаете шаг расчета на -1, блок наследовал свой шаг расчета от блока Simulation 3D Scene Configuration.
Эти внутренние параметры камеры эквивалентны свойствам fisheyeIntrinsics Объект (Computer Vision Toolbox). Чтобы получить внутренние параметры для вашей камеры, используйте приложение Camera Calibrator (Computer Vision Toolbox).
Distortion center (pixels) — Центр искаженияЦентр искажения в виде вектора с 2 элементами с действительным знаком. Модули находятся в пикселях.
Image size (pixels) — Размер изображения производится камеройРазмер изображения, произведенный камерой в виде вектора 1 на 2 с действительным знаком положительных целых чисел формы [mrows, ncols]. Модули находятся в пикселях.
Mapping coefficients — Полиномиальные коэффициенты для функции проекцииПолиномиальные коэффициенты для функции проекции, описанной моделью [1] Тейлора Скарамаззы в виде вектора 1 на 4 с действительным знаком из формы [a0 a2 a3 a4].
Пример: [320, -0.001, 0, 0]
Stretch matrix — Преобразовывает точку от плоскости датчика до плоскости камерыПреобразовывает точку от плоскости датчика до пикселя в плоскости изображения камеры. Неточное совмещение происходит во время процесса оцифровки, когда линза не параллельна датчику.
Пример: [0, 1; 0, 1]
Output location (m) and orientation (rad) — Выведите местоположение и ориентацию датчикаoff (значение по умолчанию) | onВыберите этот параметр, чтобы вывести местоположение и ориентацию датчика в портах Location и Orientation, соответственно.
Чтобы визуализировать изображения камеры, которые выводятся портом Image, используйте блок Video Viewer (Computer Vision Toolbox) или To Video Display (Computer Vision Toolbox).
Поскольку Нереальный Engine может занять много времени, чтобы запустить между симуляциями, рассмотреть логгирование сигналов, что датчики выводят. Можно затем использовать эти данные, чтобы разработать алгоритмы восприятия в MATLAB®. Смотрите Конфигурируют Сигнал для Логгирования (Simulink).
Можно также сохранить данные изображения как видео при помощи блока To Multimedia File (Computer Vision Toolbox). Для примера этой настройки смотрите, что Детектор Маркера Маршрута Проекта Использует Нереальную Среду симуляции Engine.
[1] Scaramuzza, D., А. Мартинелли и Р. Сигварт. "Тулбокс для легкой калибровки камеры Omindirectional". Продолжения к международной конференции IEEE по вопросам интеллектуальных роботов и систем (IROS 2006). Пекин, Китай, 7-15 октября 2006.
fisheyeIntrinsics (Computer Vision Toolbox)