Research Project

R3OBJ: Reconstrucción 3D, localización y segmentación automática de objetos a partir de imágenes

Type

CSIC Project

Start Date

22/11/2018

End Date

21/11/2020

Project Code

201850I099

Default project illustration

Staff

Project Description

En este proyecto se pretende, únicamente a partir de una colección de imágenes RGB, inferir simultáneamente la configuración 3D de los diversos objetos que aparecen en las imágenes, la localización 3D de la cámara desde donde fue tomada cada una de ellas, así como la segmentación en categorías de los diversos objetos. El problema planteado está inherentemente mal condicionado por definición, especialmente si no se considera ningún paquete de datos de entrenamiento para reducir el espacio de soluciones. Esta necesidad implica la exploración de nuevos priors geométricos y probabilísticos, capaces de codificar las restricciones necesarias que permitan inferir con precisión la reconstrucción y la segmentación de los objetos observados de forma conjunta. Las nuevas restricciones serán impuestas mediante técnicas de optimización diseñadas al uso, con el fin de obtener algoritmos no supervisados, unificados, y eficientes, capaces de funcionar en dispositivos móviles únicamente a partir de información visual.

Project Publications

Journal Publications

  • A. Agudo. Unsupervised 3D reconstruction and grouping of rigid and non-rigid categories. IEEE Transactions on Pattern Analysis and Machine Intelligence, 44(1): 519-532, 2022.

    Open/Close abstract Abstract Info Info pdf PDF

Conference Publications

  • A. Agudo. Segmentation and 3D reconstruction of non-rigid shape from RGB video, 27th IEEE International Conference on Image Processing, 2020, Abu Dhabi, United Arab Emirates (Virtual), pp. 2845-2849.

    Open/Close abstract Abstract Info Info pdf PDF
  • G. Rotger, F. Moreno-Noguer, F. Lumbreras and A. Agudo. Detailed 3D face reconstruction from a single RGB image, 27th International Conference in Central Europe on Computer Graphics, Visualization and Computer Vision, 2019, Plzen, Czech Republic, Vol 27(2) of Journal of WSCG, pp. 103-112.

    Open/Close abstract Abstract Info Info pdf PDF
  • G. Rotger, F. Moreno-Noguer, F. Lumbreras and A. Agudo. Single view facial hair 3D reconstruction, 2019 Iberian Conference on Pattern Recognition and Image Analysis, 2019, Madrid, Spain, pp. 423-436.

    Open/Close abstract Abstract Info Info pdf PDF