3D-Reconstruction of Faces from Youtube-Videos

Gepostet vor 2 Jahren, 10 Monaten in #Misc #Science #Tech #3d #FaceDetection

Share: Twitter Facebook Mail

Auf der European Conference on Computer Vision haben sie eine sogenannte Total Moving Face Reconstruction vorgestellt, eine Methode, um 3D-Modelle von Gesichtern aus Youtube-Videos zu generieren und sie mit Bewegungen und Mimik aus dem Clip zu synchronisieren. In harmlos ist das ein 3D-Avatar-Generator für's Oculus Rift so in circa 2 Jahren. In doof sind das dreidimensionale und begehbare 3D-Räume aus herkömmlichen Überwachungsvideos inklusive Gesichtserkennung, ohne die Cams für teuer Geld upgraden zu müssen.

3dflow_result1

We present an approach that takes a single video of a person's face and reconstructs a high detail 3D shape for each video frame. We target videos taken under uncontrolled and uncalibrated imaging conditions, such as youtube videos of celebrities. In the heart of this work is a new dense 3D flow estimation method coupled with shape from shading. Unlike related works we do not assume availability of a blend shape model, nor require the person to participate in a training/capturing process. Instead we leverage the large amounts of photos that are available per individual in personal or internet photo collections. We show results for a variety of video sequences that include various lighting conditions, head poses, and facial expressions.

Total Moving Face Reconstruction (via Alex)

Digital Skin

Emilio Vavarella: The Digital Skin Series, 2016. „Archival inkjet prints on metallic paper. 18 elements. X:150; Y:115 cm, each.“ Von…

3D-Rendering accepted as ID-Photo

Herr Raphaël Fabre hat ein 3D-Rendering als Passfoto eingereicht und ist damit durchgekommen. An den Haaren hätten sie's eigentlich erkennen…

Human Fetuses prefer „face-like“ Shapes

Vor einer Woche bloggte ich über Gesichter, die man aus den „Gesichtserkennungs-Neuronen“ von Makaken-Affen rekonstruiert hatte. Damals schrieb ich: „Der…

Perpetual Path

Perpetual Path, Kurzfilm von Maxim Zhestkov über „the dialogue and tension between nature and technology, sound and silence, organic and…

Algo-Faces reconstruced from Monkey Brainwaves

Vor drei Wochen erst bloggte ich über die visuelle Rekonstruktion von Gedanken anhand von EEG-Aufzeichnungen, mit denen man Neural Networks…

Smile-Filtering a Face until there is no Face left to smile-filter

Gene Kogan: „just in case you were wondering, this is what happens when you repeatedly run FaceApp’s smile filter until…

Ash Thorps Design-Files for Ghost in the Shell

Jede Menge Animationen, Logos und 3D-Renderings aus Ghost in the Shell von Ash Thorp: „The sequences and images in the…

3D-Renderings like 70s-SciFi-Novel Cover-Artworks

Mike Winkelmann (Behance) produziert seit 9 Jahren jeden Tag 1 Artwork, seit einiger Zeit vor allem in Cinema4D. Manchmal sind…

▘▞▀▝▇▞▌▞▉▄▛▞▚▚▞▞

Ferrofluidlike-Faces by DFMN. BTW: By coincidence this posting has the exact WordPress-ID 120000 which fits quite smoothly I guess.

Cube-Transformation-Bot

Ganz großartiger Bot von Andrew Heumann: Tweet2Form: The Formalist Tweetbot. Das Teil versteht 11 verschiedene Befehle für 3D-Transformationen, führt die…

Algorithm watching Wolf of Wallstreet

Tolles Computervision-Experiment von Støj: An algorithm watching a movie trailer: „A program removing everything but the objects it recognises when…