Computer Vision

1. Основы
компьютерного
стерео зрения
Шкловец Артем
machine learning engineer

2. Многовидовая реконструкция

3. Стерео реконструкция

4. Модель камеры
O – Центр проекции.
Лучи от одной точки преломляются в линзе и собираются в другой точке
позади линзы

5. Модель перспективной проекции

6. Модель перспективной проекции

7. Однородные координаты

8. Внутренняя калибровка камеры
Единичная матрица
перспективной
проекции
Матрица
перспективной
проекции
представляет собой
матрицы
внутренней и
внешней
калибровки

9. Полная матрица внутренней калибровки

10. Внешняя калибровка камеры

11. Полная матрица перспективной проекции

12. Гомография

13. Калибровка камеры
 DLT – метод для
нахождения матрицы
перспективной
проекции
 RQ – факторизация
для извлечения
матрицы внутренней и
внешней калибровки
 Уточнение
параметров с
помощью методов
нелинейной
оптимизации ошибки
репроэкции

14. Задача построения стереоизображения
Левое Правое

15. Ректификация изображений

16. Эпиполярная геометрия

17. Эпиполярное ограничение

18. Примеры эпиполярных линий
Сближающиеся камеры

19. Стереопара
Примеры эпиполярных линий

20. Примеры эпиполярных линий
Движение вперед

21. Эпиполярное ограничение

22. Фундаментальная матрица

23. 8-ми точечный метод

24. RANSAC (RANdom SAmple Consensus)

25. RANSAC общая схема алгоритма

26. RANSAC пример

27. Методы получения стереоэффекта
 Анаглиф: цветового кодирования изображений, предназначенных
для левого и правого глаза.
 Поляризационное стерео зрение: Левое и правое стекло
пропускает изображение только со своей поляризацией. Делятся
на подвиды, использующие линейную и круговую поляризацию.
 Активное зрение: Передают изображение на каждый глаз
поочерёдно. 3d очки с активным затвором используют в качестве
линз жидкие кристаллы, которые способны под воздействием
управляющего сигнала с высокой скоростью попеременно
закрывать и открывать левый и правый глаз.

28. Формулы получения анаглифа
 Обычный анаглиф
𝑅
𝐺
𝐵
=
1 0 0
0 0 0
0 0 0
∗
𝐿. 𝑅
𝐿. 𝐺
𝐿. 𝐵
+
0 0 0
0 1 0
0 0 1
∗
𝑅. 𝑅
𝑅. 𝐺
𝑅. 𝐵
 Темный анаглиф
𝑅
𝐺
𝐵
=
0,299 0,587 0,114
0 0 0
0 0 0
∗
𝐿. 𝑅
𝐿. 𝐺
𝐿. 𝐵
+
0 0 0
0 0 0
0,299 0,587 0,114
∗
𝑅. 𝑅
𝑅. 𝐺
𝑅. 𝐵
 Оптимизированный анаглиф
𝑅
𝐺
𝐵
=
0,4154 0,4710 0,1669
−0,0458 −0,0484 −0,0257
−0,0547 −0,0615 0,0128
∗
𝐿. 𝑅
𝐿. 𝐺
𝐿. 𝐵
+
−0,0109 −0,0364 −0,0060
0,3756 0,7333 0,0111
−0,0651 −0,1287 1,2971
∗
𝑅. 𝑅
𝑅. 𝐺
𝑅. 𝐵

29. Пример Анаглифа