Zoom & Enhance via Neural Network Super Resolution

Gepostet vor 8 Monaten, 18 Tagen in #Tech #AI #AlgoCulture #Quantumphysics

Share: Twitter Facebook Mail

enhance1

Zoom and Enhance in der AI-Variante, ein Neural Network gleicht den Informationsverlust durch Zooming aus. Das Ergebnis ist so mittel, wobei ich die Gesichter der Damen in der ersten Zeile jeweils doch recht überzeugend finde. Man muss auch bedenken, dass es hier grade mal um läppische 64x64 Pixel geht.

Image super-resolution through deep learning. This project uses deep learning to upscale 16x16 images by a 4x factor. The resulting 64x64 images display sharp features that are plausible based on the dataset that was used to train the neural net.

Here's an random, non cherry-picked, example of what this network can do. From left to right, the first column is the 16x16 input image, the second one is what you would get from a standard bicubic interpolation, the third is the output generated by the neural net, and on the right is the ground truth.

In anderen Papers arbeiten sie ebenfalls grade an AI-gestütztem verlustfreiem Zoom, beschränken sich dabei aber vor allem auf Muster und Details, der verlustfreie Zoom auf Portraits oder komplette Motive dürfte noch ein bisschen dauern. Nennt sich in den Papers „Super Resolution“ und funktioniert ganz banal runtergebrochen wie ein Fraktal, in das man immer weiter reinzoomt und in dem immer dieselben Muster auftauchen.

zoom2

Papers: 1. Deeply-Recursive Convolutional Network for Image Super-Resolution, 2. Accurate Image Super-Resolution Using Very Deep Convolutional Networks, 3. End-to-End Image Super-Resolution via Deep andShallow Convolutional Networks, 4. Single Image Super-resolution from Transformed Self-Exemplars

Ich könnte mir aber gut vorstellen, dass ein Neural Network, wenn es erstmal mit genug Bildmaterial angelernt wurde, bereits heute recht brauchbare Ergebnisse auch bei Überwachungsbildern ausspuckt. So als Beispiel.

Aber bis dahin dauert das noch ein bisschen und benötigt sicher auch mehr Rechnerpower. Google soll seinen Quantenrechner ja erst nächstes Jahr vorstellen und so ein Rechner verspeist Algorithmen wie die hier angesprochenen zum Frühstück und da haben wir bis Quantum Supremacy ja immerhin noch ein paar Monate Zeit. Vielleicht war das mit der Singularität ja doch gar kein Quatsch.

zoom3 zoom4 zoom5 zoom6

Neulich in Darmstadt: Das Geile Neue Internet – Potential of (visible) Infinite Idea Space

[update] Hier ein Livestream auf Facebook. Hier der Vortrag auf Youtube. Wer einem sehr nervösen Typen auf einer Bühne beim…

Smile-Filtering a Face until there is no Face left to smile-filter

Gene Kogan: „just in case you were wondering, this is what happens when you repeatedly run FaceApp’s smile filter until…

Neural Network dreams your Dreams

Wissenschaftler können bereits seit Jahren Bilder aus Gehirnscans extrahieren, also: Tatsächlich ein Abbild davon schaffen, was wir sehen. Die Resultate…

Neural Network dreams of riding a Train

Tolle Arbeit von Damien Henry: Ein Neural Network, ein sogenannter „prediction algorithm“, der Frames eines Videos „errät“, ausgehend vom jeweils…

4 AI-Obamas learn Algo-Lipsynch from Audio

Seit ich über die neuen Möglichkeiten von Machine Learning bezüglich Computer Vision und der Generation von Bildern schreibe, vor allem…

Daddy Cthulhu Cumshot: Weird Algo-Poetry from repetitive Cut'n'Paste-Autocomplete

Das LanguageLog hat die „psychedellic“ AI-„Dreaming of“-Technik auf Google Translate angewandt und dort regelmäßige Sprach/Zeichen-Muster („Iä! Iä! Iä! Iä! Iä!…

Neural Networks for Character Control

Daniel Holden, Taku Komura und Jun Saito haben ein Neural Network auf Character-Animationen trainiert, mit dem Figuren in Games und…

Predictive Policing for Banksters

Schönes Ding von Sam Lavigne, Predictive Policing für Wirtschaftskriminalität im Finanzsektor, 'ne Robocop-App für Bankster. White Collar Crime Risk Zones…

AI Voice-Cloning

Vor ein paar Monate veröffentlichte Google sein WaveNet, ein auf Stimmen trainiertes Neurales Netzwerk mit einem deutlichen Qualitätssprung gegenüber bisherigen…

Neural Network cooks with Cthulhu

Janelle Shane spielt mit Neural Networks rum und hat eins davon auf Lovecraft trainiert. Dann hat sie das Neural Network…

Next Level, photorealistic Style-Transfer

In ihrem neuen Paper stellen Fujun Luan, Sylvain Paris, Eli Shechtman und Kavita Bala eine neue Style-Transfer-Methode vor: Figure 1:…