Algorithmic Eyeroll

Gepostet vor 1 Jahr, 24 Tagen in #Design #Tech #AI #AlgoCulture #Eyes #FaceDetection

Share: Twitter Facebook Mail

5

NeuralNetwork-Fuzzies am Skolkovo Institute of Science and Technology haben eine künstliche Intelligenz darauf trainiert, Bickrichtungen in Bildern zu korrigieren: DeepWarp: Photorealistic ImageResynthesis for Gaze Manipulation. Erinnert an Tom Whites Smile-Vector und ist genau wie seine Arbeit eine (noch) sehr aufwändige Spielerei, die man derzeit (noch) besser mit Photoshop hinbekommt und die (noch) nur bei Stills funktioniert. (via CreativeAI)

In this work, we consider the task of generating highly-realistic images of a given face with a redirected gaze. We treat this problem as a specific instance of conditional image generation, and suggest a new deep architecture that can handle this task very well as revealed by numerical comparison with prior art and a user study. Our deep architecture performs coarse-to-fine warping with an additional intensity correction of individual pixels.

All these operations are performed in a feed-forward manner, and the parameters associated with different operations are learned jointly in the end-to-end fashion. After learning, the resulting neural network can synthesize images with manipulated gaze, while the redirection angle can be selected arbitrarily from a certain range and provided as an input to the network.

[update] Haha, kurz nach Veröffentlichung des Postings rutschte das hier durch meine Timeline, eine Mimik- und Blickrichtungs-Erkennung für VR.

6 gaze1a gaze1

Da es keine Datensätze für Blickrichtungen gibt, haben sie für ihre Arbeit einfach ein paar Testpersonen in eine Clockwork-Orange-Vorrichtung geklemmt und auf einen wandernden Punkt glotzen lassen:

gaze2

There are no publicly available datasets suitable for the purpose of the gaze correction task with continuously varying redirection angle. Therefore, we collect our own dataset Figure 4. To minimize head movement, a person places his head on a special stand and follows with her gaze a moving point on the screen in front of the stand. While the point is moving, we record several images with eyes looking in different fixed directions (about 200 for one video sequence) using a webcam mounted in the middle of the screen. For each person we record 2 − 10 sequences, changing the head pose and light conditions between different sequences. Training pairs are collected, taking two images with different gaze directions from one sequence. We manually exclude bad shots, where a person is blinking or where she is not changing gaze direction monotonically as anticipated. Most of the experiments were done on the dataset of 33 persons and 98 sequences.

1 2 3 4 7

Hier eine non-algorithmische Alternative mit Kinski und Nosferatu vom großartigen Ensalada-Tumblr:

tumblr_mzxbdlxMxW1sa11jco1_500

10 PRINT CHR$ (205.5 + RND (1)); on a Commodore Pet

10 PRINT CHR$ (205.5 + RND (1)); 20 GOTO 10 ist sowas wie ein Miniatur-Programm in Basic für Generative Graphics,…

DeepMind releases StarCraft AI

Google und Blizzard haben ihre StarCraft AI veröffentlicht: Testing our agents in games that are not specifically designed for AI…

Self-Driving Cars hacked with Love and Hate

Wissenschaftler der Uni Washington haben die Computer-Vision-Systeme von selbstfahrenden Autos gehackt – indem sie Love und Hate in colorierten Pixelfonts auf…

Cellular Automata Cube

Cubes.io: Conways Game of Life als 3D-Spielzeug mit Cubes und Spheres und Schnickschnack als Evolution-Nullpunkt, von wo aus die ganzen…

Neural Network-Faces synched to Music

„My first attempt to map a song made by @kamptweets onto GAN generated proto-faces.“ Bohemian Rhapsody next. The Three Nightingans.…

AI-Animations with human Sounds

Google vor ein paar Tagen so: „Yay, wir haben hier 'ne neue AI-based Animation-Tech, hooray!“ (Paper) Hayayo Miyazaki über AI-based…

27 Contact-Lenses removed from Eye

Einer meiner Alpträume geht so: Aus irgendeinem Grund trage ich Kontaktlinsen und wenn ich blinzle, schiebe ich die Teile unter…

Visual AI-Spaces Auto-Pilot

Ich habe schon ein paar mal über Mario Klingemanns Arbeiten hier gebloggt, derzeit jagt er Neural Networks durch Feedback-Loops und…

Synthesizing Obama from Audio

Im Mai bloggte ich über ein damals noch nicht veröffentlichtes Paper zur SigGraph2017, in dem sie eine Methode für generative…

Generative Pearls

Cool fractal and generative art by Julien Leonard. I dig his explanation from his about-page: „I create algorithms that connect…

Moarph

Mario Klingemann does some weird shit again with CycleGAN Feedback Loops (Neural Networks feeding their results back to each other).…