Hybrid techniques of depth map estimation and their application in three-dimensional video systems
[ 1 ] Katedra Telekomunikacji Multimedialnej i Mikroelektroniki, Wydział Elektroniki i Telekomunikacji, Politechnika Poznańska | [ P ] employee
PL Hybrydowe techniki wyznaczania map głębi i ich wykorzystanie w systemach obrazu trójwymiarowego
english
- multi-view
- depth estimation
- time-of-flight
- data fusion
- wielowidokowy
- estymacja głębi
- pomiar czasu propagacji
- fuzja danych
EN The dissertation addresses fusion of video data and time-of-flight (ToF) depth data acquired by a hybrid mutli-camera system. The goal is to obtain higher quality depth maps than can be attained through either one of those techniques. The author proposes modifications to state-of-the-art depth estimation algorithms so they are able to use both video data and ToF data. The evaluation of the proposed algorithms is done through objective assessment of virtual view quality (using PSNR) and through direct depth map comparison with a ground-truth reference. For the former a set of representative multi-view video sequences, recommended by the MPEG group is used. For the latter the dataset from the Middlebury database is used. The author also proposes an algorithm aimed at increasing inter-view consistency of depth maps thus allowing them to be compressed more efficiently by a multi-view codec. The increase of compression efficiency is proved using sequences recommended by the MPEG group.
PL Rozprawa dotyczy fuzji danych wizyjnych oraz danych z kamer głębi ToF zarejestrowanych poprzez hybrydowy system wielokamerowy. Celem jest uzyskanie map głębi o wyższej jakości niż pozwala na to tylko jedna z tych technik. Autor proponuje modyfikacje do zgodnych ze stanem wiedzy algorytmów estymacji głębi, dzięki czemu mogą one wykorzystywać zarówno dane wizyjne jak i dane ToF. Ocena proponowanych algorytmów została przeprowadzona za pomocą obiektywnej oceny jakości widoku wirtualnego (używając PSNR) oraz przez bezpośrednie porównanie map głębi z mapą głębi odniesienia. W pierwszym porównaniu wykorzystano zbiór reprezentatywnych sekwencji wielowidokowych, zalecany przez grupę MPEG. W drugim zbiór danych z bazy Middlebury. Autor proponuje również algorytm poprawiający spójność międzywidokową map głębi przez co mogą one zostać skompresowane z większą efektywnością przez kodek wielowidokowy. Wzrost efektywności kompresji został udowodniony na zestawie sekwencji zalecanych przez grupę MPEG.
229
engineering and technical sciences
telecommunications
DrOIN 2029
public
Atanas Gotchev
Tampere, Finlandia
10.05.2019
english
public
Paweł Strumiłło
Łódź, Polska
20.05.2019
polish
public
dissertation
Poznań, Polska
04.07.2019
Rada Wydziału Elektroniki i Telekomunikacji Politechniki Poznańskiej
doktor nauk inżynieryjno-technicznych w dyscyplinie: informatyka techniczna i telekomunikacja