Zoom & Enhance via Neural Network Super Resolution

Gepostet vor 2 Monaten, 27 Tagen in Tech Share: Twitter Facebook Mail

enhance1

Zoom and Enhance in der AI-Variante, ein Neural Network gleicht den Informationsverlust durch Zooming aus. Das Ergebnis ist so mittel, wobei ich die Gesichter der Damen in der ersten Zeile jeweils doch recht überzeugend finde. Man muss auch bedenken, dass es hier grade mal um läppische 64x64 Pixel geht.

Image super-resolution through deep learning. This project uses deep learning to upscale 16x16 images by a 4x factor. The resulting 64x64 images display sharp features that are plausible based on the dataset that was used to train the neural net.

Here's an random, non cherry-picked, example of what this network can do. From left to right, the first column is the 16x16 input image, the second one is what you would get from a standard bicubic interpolation, the third is the output generated by the neural net, and on the right is the ground truth.

In anderen Papers arbeiten sie ebenfalls grade an AI-gestütztem verlustfreiem Zoom, beschränken sich dabei aber vor allem auf Muster und Details, der verlustfreie Zoom auf Portraits oder komplette Motive dürfte noch ein bisschen dauern. Nennt sich in den Papers „Super Resolution“ und funktioniert ganz banal runtergebrochen wie ein Fraktal, in das man immer weiter reinzoomt und in dem immer dieselben Muster auftauchen.

zoom2

Papers: 1. Deeply-Recursive Convolutional Network for Image Super-Resolution, 2. Accurate Image Super-Resolution Using Very Deep Convolutional Networks, 3. End-to-End Image Super-Resolution via Deep andShallow Convolutional Networks, 4. Single Image Super-resolution from Transformed Self-Exemplars

Ich könnte mir aber gut vorstellen, dass ein Neural Network, wenn es erstmal mit genug Bildmaterial angelernt wurde, bereits heute recht brauchbare Ergebnisse auch bei Überwachungsbildern ausspuckt. So als Beispiel.

Aber bis dahin dauert das noch ein bisschen und benötigt sicher auch mehr Rechnerpower. Google soll seinen Quantenrechner ja erst nächstes Jahr vorstellen und so ein Rechner verspeist Algorithmen wie die hier angesprochenen zum Frühstück und da haben wir bis Quantum Supremacy ja immerhin noch ein paar Monate Zeit. Vielleicht war das mit der Singularität ja doch gar kein Quatsch.

zoom3 zoom4 zoom5 zoom6

Tags: AI AlgoCulture Quantumphysics

algo1

Algorithmic Nicolas Cage/Taylor Swift Face-Swaps

Iryna Korshunova, Wenzhe Shi, Joni Dambre und Lucas Theis haben einen Algorithmus für FaceSwaps programmiert und zur Illustration ihrer Methode…

c1

█ Blackout █ Generative Censorship-Poetry

█ Blackout █ ist Liza Dalys Beitrag zum NaNoGenMo 2016 (National Novel Generation Month, das AlgoPoetry-Äquivalent zum NaNoWriMo), ein Algorithmus…

sat

Neural Network Satellite-Images from Doodles

Invisible Cities, ein Neural Network, das Satellitenbilder aus Gekritzel generiert. Funktioniert so ein bisschen wie Style-Transfer, nur für Satellitenpics. In…

birdsounds

Google A.I. sortiert Vogelgesang

Google hat unter AI-Experiments ’ne Spielwiese für Machine Learning und AI eingerichtet. Ein paar der Experimente kannte ich bereits von…

obama

Adobe Voice-Generator formuliert neue Worte aus Stimmaufnahmen

Adobe hat vor zwei Tagen auf seiner Max Conference neben AI-Schnickschnack für seine CreativeCloud auch ein neues Tool namens VoCo…

AI goes Star Craft

AI goes Star Craft

Google und Blizzard haben gestern auf der BlizzCon eine offizielle Coop angekündigt, die StarCraft (also wohl den Code und damit…

future

Alexa Fishbot

The Future. It's beautiful. who did thispic.twitter.com/Wriy531ALr — 🦃 Wolf ウルフ (@Ouren) November 4, 2016

bildschirmfoto-2016-11-04-um-18-50-29

Once in a Lifetime-Bot ❤️

Not the same as it ever was: Der Tweetie-Bot How Did I Get Here? von Botferatu, der Lyrics für Talking…

mixed_font

Neural Style Transfer für chinesische Fonts

Interessanter Ansatz für Type-Design: Neural Style Transfer For Chinese Fonts. (via Samim) Bei der Gestaltung von chinesischen Fonts müssen zehntausende…

banklobby_example

Neural Enhance getting sharp

Neues von AI-basiertem Zoom & Enhance (Vorher auf NC: Zoom & Enhance via Neural Network Super Resolution, Neural Network Super…

bildschirmfoto-2016-11-02-um-15-31-50

Ein algorithmisches Tagebuch aller Zeiten

Gestern startete der Algo-Literatur-Wettbewerb National Novel Generation Month 2016 mit jetzt bereits rund 80 eingereichten Robot-Text-Projekten und nach einem Tag…