Научный журнал
Научное обозрение. Технические науки
ISSN 2500-0799
ПИ №ФС77-57440

ВОССТАНОВЛЕНИЕ КАРТЫ ГЛУБИНЫ НА ОСНОВЕ КОМБИНИРОВАННОЙ ОБРАБОТКИ МНОГОКАНАЛЬНОГО ИЗОБРАЖЕНИЯ

Воронин В.В. 1 Фисунов А.В. 1 Марчук В.И. 1 Свирин И.С. 2 Петров С.П. 3
1 ФГБОУ ВПО «Донской государственный технический университет»
2 ЗАО «Нордавинд»
3 ООО «Нордавинд-Дубна»
В настоящее время RGB-D сенсоры получили широкое распространение. Оценка расстояния до различ¬ных точек сцены производится с помощью измерения относительного смещения точек, проецируемых проек¬тором с инфракрасной камерой. В ряде случаев спроецированные точки могут быть не найдены, что приводит к появлению дефектов - это могут быть потерянные и искаженные значения глубины, случайный шум, неравно¬мерные края и поверхности объектов, а так же неверно измеренные значения глубины для некоторых матери¬алов с зеркальными или мелкозернистыми поверхностями. В данной статье предлагается алгоритм, который позволяет восстанавливать поврежденные участки на карте глубины, с последующей корректировкой искаже¬ний на границах объектов. Это достигается за счет использования методов реконструкции и адаптивной меди¬анной фильтрации, основанных на совмещении информации канала цветности и глубины. Для корректировки артефактов на исходном изображении, предлагается использовать адаптивный медианный фильтр, который принимает во внимание не только информацию о глубине сцены, но и информацию с цветной камеры устрой¬ства Kinect. В данном методе используется LPA-ICI метод, который позволяет формировать блоки медианного фильтра, форма которых чувствительна к перепадам яркости на изображении. В статье рассмотрено несколько примеров, которые позволяют сделать вывод об эффективности предложенного подхода для восстановления больших и малых областей на тестовых изображениях карт глубин.
DEPTH MAPS RECOVERY USING A COMBINATION OF MULTICHANNEL IMAGE PROCESSING

Voronin V.V. 1 Fisunov A.V. 1 Marchuk V.I. 1 Svirin I.S. 2 Petrov S.P. 3
1 Don State Technical University
2 CJSC «Nordavind»
3 LLS « Nordavind-Dubna»

Abstract:
RGB-D sensors are relatively inexpensive and are commercially available off-the-shelf. However, owing to their low complexity, there are several artifacts that one encounters in the depth map like holes, miss-alignment between the depth and color image and lack of sharp object boundaries in the depth map. Depth map generated by Kinect cameras also contain a significant amount of missing pixels and strong noise, limiting their usability in many computer vision applications. In this paper we present an efficient hole filling and damaged region restoration method that improves the quality of the depth maps obtained with the Microsoft Kinect device. The proposed approach based on a modified exemplar-based inpainting and LPA-ICI filtering by exploiting the correlation between color and depth values in local image neighborhoods. The edges of the objects are sharpened and aligned with the objects in the color image using such approach. Several examples considered in this paper show the effectiveness of the proposed approach for large holes removal as well as recovery of small regions on several test images of depth maps.

Keywords:

Библиографическая ссылка

Воронин В.В., Фисунов А.В., Марчук В.И., Свирин И.С., Петров С.П. ВОССТАНОВЛЕНИЕ КАРТЫ ГЛУБИНЫ НА ОСНОВЕ КОМБИНИРОВАННОЙ ОБРАБОТКИ МНОГОКАНАЛЬНОГО ИЗОБРАЖЕНИЯ // Научное обозрение. Технические науки. – 2015. – № 1. – С. 117-117;
URL: https://science-engineering.ru/ru/article/view?id=912 (дата обращения: 28.10.2020).

Предлагаем вашему вниманию журналы, издающиеся в издательстве «Академия Естествознания»
(Высокий импакт-фактор РИНЦ, тематика журналов охватывает все научные направления)

«Фундаментальные исследования» список ВАК ИФ РИНЦ = 1.074