Time-of-flight камера () — відеокамера, що формує так зване дальнісне зображення. Такі відеокамери використовуються для формування двовимірного зображення, пікселями якого є відстані від екрана до конкретних точок спостереженняЧто такое ToF камера и зачем она нужна смартфону .
Технології
Розрахунок глибини і відстані забезпечується за допомогою технології вимірювання "часу польоту" (ToF), що подібна до алгоритмів, які використовуються в радарах. Завдяки цьому формується дальностне зображення, яке схоже на зображення радіолокатора, за винятком того, що для його побудови задіяно світловий імпульс замість радіочастотної хвилі.
Радіочастотна модуляція світла Випромінювачі ToF камер можуть бути реалізловані на основі світлодіодів або лазерів.
Для визначення дальності може використовуватися фазовий метод дальнометрії Слюсар В.І., Зінченко А.О. Фазовий метод виміру відстані в MIMO-системах радіолокації та зв’язку. // VI-й науково-практичний семінар “Пріоритетні напрямки розвитку телекомунікаційних систем та мереж спеціального призначення” (20 жовтня 2011 р., доповіді та тези доповідей). – Київ: ВІТІ НТУУ "КПІ", 2011. - C. 180 Слюсар В.І., Зинченко А.О. Визначення відстаней в MIMO-системах зв’язку та радіолокації на основі фазових вимірів.// Сучасні інформаційні технології у сфері безпеки та оборони. НАОУ.- 2012. - № 2(14). – С. 26 - 30 , який базується на радіочастотній модуляції випромінюваного світлового потоку і визначенні фазових розбіжностей між ним і світловими сигналами, відбитими від просторово розподілених об'єктів.
Імпульсна лазерна технологія ToF-лазерна камера із ПЗЗ-камерою з високою чутливістю і з швидким стробуванням дозволяє оцінювати глибину із субміліметровою роздільною здатністю (точністю). За допомогою цієї техніки короткий лазерний імпульс освітлює сцену, а надчутлива ПЗЗ-камера відкриває свій швидкий затвор лише на кілька сотень пікосекунд. Тривимірна сцена обчислюється із послідовності двовимірних зображень, що реєструються при збільшенні затримки між імпульсом лазера і відкриттям затвора.High accuracy 3D laser radar Jens Busck and Henning Heiselberg, Danmarks Tekniske University, 2004
Будова системи Типова ToF-камера складається з джерела активного освітлення, оптики, сенсора зображення та блока обробки. Джерелом слугують світлодіоди або лазерні діоди, найчастіше в ближньому інфрачервоному діапазоні, щоб підсвічування не заважало спостерігачеві. У фазових системах інтенсивність випромінювання модулюють, а сенсор синхронно вимірює фазовий зсув відбитого сигналу. В імпульсних системах визначають затримку між випромінюванням короткого світлового імпульсу та реєстрацією його відбиття.
Об’єктив збирає відбите світло та формує зображення на масиві фотодетекторів. Оптичний смуговий фільтр пропускає переважно довжини хвиль підсвічування й послаблює частину фонового світла. Кожен піксель сенсора оцінює не лише інтенсивність, а й параметр, з якого обчислюють відстань; тому за один кадр утворюється двовимірна карта глибини. Керувальна електроніка синхронізує випромінювач і сенсор, перетворює виміряний час або фазу на відстань та виконує початкову корекцію даних.
Джерела похибок Точність ToF-камери залежить від властивостей сцени, зовнішнього освітлення та характеристик самого сенсора. Яскраве сонячне або штучне світло зменшує відношення сигналу до шуму, оскільки на детектор разом із модульованим сигналом потрапляє фонове випромінювання. Темні поверхні повертають мало світла, тоді як блискучі поверхні можуть створювати нестійкі відбиття. На межі двох об’єктів один піксель іноді приймає суміш сигналів із різних відстаней, через що виникає проміжне, фізично неправильне значення глибини.
Ще одним джерелом похибки є багатопроменеве поширення: світло може відбитися від кількох поверхонь і дістатися пікселя шляхами різної довжини. Камера тоді реєструє сумарний сигнал і може визначити відстань неправильно, особливо в кутах приміщень та біля дзеркальних об’єктів. У фазових системах неоднозначність також виникає, коли виміряна відстань перевищує інтервал, однозначно заданий частотою модуляції. Для послаблення цих ефектів застосовують калібрування, кілька частот модуляції, фільтрацію та алгоритми відокремлення прямого відбиття від непрямих складових.
Застосування Ідентифікація обличчя Основний поштовх застосуванню ToF камер надав розвиток смартфонів. Одним з перших прикладів практичного використання стала реалізація на їх основі технології розпізнавання обличчя Face ID в смартфоні IPhone X .
3D сканування Поліпшення характеристик ToF камер смартфонів дозволяє розширити їх використання на сферу 3D-сканування об'єктів, наприклад, з метою їхнього подальшого 3D-друку, а також 3D-проектування інтер'єрів, військового екіпірування, підбору одягу, взуття тощо.
Доповнена реальність ToF камери у смартфонах дозволяють підняти на новий рівень застосування технології доповненої реальності на основі прецизійної локалізації оточуючої 3D-сцени.
Див. також 3D-сканер Лазерний далекомір Лідар Фотограмметрія CCD-камери Структура із руху Оптичний потік
Примітки
Джерела