Zoom & Enhance via Neural Network Super Resolution

Gepostet vor 4 Monaten, 15 Tagen in #Tech #AI #AlgoCulture #Quantumphysics

Share: Twitter Facebook Mail

enhance1

Zoom and Enhance in der AI-Variante, ein Neural Network gleicht den Informationsverlust durch Zooming aus. Das Ergebnis ist so mittel, wobei ich die Gesichter der Damen in der ersten Zeile jeweils doch recht überzeugend finde. Man muss auch bedenken, dass es hier grade mal um läppische 64x64 Pixel geht.

Image super-resolution through deep learning. This project uses deep learning to upscale 16x16 images by a 4x factor. The resulting 64x64 images display sharp features that are plausible based on the dataset that was used to train the neural net.

Here's an random, non cherry-picked, example of what this network can do. From left to right, the first column is the 16x16 input image, the second one is what you would get from a standard bicubic interpolation, the third is the output generated by the neural net, and on the right is the ground truth.

In anderen Papers arbeiten sie ebenfalls grade an AI-gestütztem verlustfreiem Zoom, beschränken sich dabei aber vor allem auf Muster und Details, der verlustfreie Zoom auf Portraits oder komplette Motive dürfte noch ein bisschen dauern. Nennt sich in den Papers „Super Resolution“ und funktioniert ganz banal runtergebrochen wie ein Fraktal, in das man immer weiter reinzoomt und in dem immer dieselben Muster auftauchen.

zoom2

Papers: 1. Deeply-Recursive Convolutional Network for Image Super-Resolution, 2. Accurate Image Super-Resolution Using Very Deep Convolutional Networks, 3. End-to-End Image Super-Resolution via Deep andShallow Convolutional Networks, 4. Single Image Super-resolution from Transformed Self-Exemplars

Ich könnte mir aber gut vorstellen, dass ein Neural Network, wenn es erstmal mit genug Bildmaterial angelernt wurde, bereits heute recht brauchbare Ergebnisse auch bei Überwachungsbildern ausspuckt. So als Beispiel.

Aber bis dahin dauert das noch ein bisschen und benötigt sicher auch mehr Rechnerpower. Google soll seinen Quantenrechner ja erst nächstes Jahr vorstellen und so ein Rechner verspeist Algorithmen wie die hier angesprochenen zum Frühstück und da haben wir bis Quantum Supremacy ja immerhin noch ein paar Monate Zeit. Vielleicht war das mit der Singularität ja doch gar kein Quatsch.

zoom3 zoom4 zoom5 zoom6
wolf

Algorithm watching Wolf of Wallstreet

Tolles Computervision-Experiment von Støj: An algorithm watching a movie trailer: „A program removing everything but the objects it recognises when…

C2OE_6lXgAEw1Ty

Neural Enhance with creepy artificial Artifacts

Mario Klingemann (Vorher auf NC: Video-Frames sorted by Audio, Typographic Gears) hat einen Algorithmus für künstliche Artefakte gebastelt, die die…

id

Auto-Generated queer 120 Page-Sentence-Identity

Good one from 0x0a: Monologue. Who am I? Can any one answer ever be definitive enough to define oneself? Monologue…

captcha

Miniature-Playground for Captcha-Solving AIs

„I'm not a Robot“ my ass. Mini World of Bits ('MiniWoB') is a benchmark for reinforcement learning agents who interact…

nnnames

Neural Network Names from the Future

Nate Parrott hat ein Neural Network auf 7500 Vornamen trainiert und generiert nun neue Namen aus der Zukunft, inklusive „…

b00a

Text 2 Bird

Neural Networks generieren Vögel aus Textbeschreibungen in 256x256 Pixeln (das nennen AI-Forscher „High Res“, haha). Die Methode sah qualitätsmäßig vor…

Style-Transfer für Audio

Dmitry Ulyanov und Vadim Lebedev mit einem ersten Ansatz für Style Transfer für Audio oder anders formuliert: Neural Network machen…

fly

Fly AI

Installation von David Bowen, in der eine Künstliche Intelligenz/ein Machine Learning-Algorithmus über das Schicksal einer Fliegenkolonie entscheidet. Brundle-Fly is not…

homer

Homer Simpson gezeichnet mit dem Problem des Handlungsreisenden

Jack Morris hat einen Algorithmus programmiert, der ihm Vektorgrafiken und Simpsons in Punktierungen umwandelt und auf diese dann das Problem…

unfoodtruckspecified

Artbot.Space: Twitter-Bot remixt Headlines über algorithmische Kunst

Maria Roszkowska and Nicolas Maigret haben eine Plattform für AI-generierte Konzeptkunst aufgesetzt. Auf Artbot.Space sammelt man die Ergebnisse des Predictive…

A screenshot of New Zealand man Richard Lee's passport photo rejection notice, supplied to Reuters December 7, 2016.   Richard Lee/Handout via REUTERS

„Racist“ Algorithm tells Asian to open his eyes

Ein „rassistischer“ Gesichtserkennungs-Algorithmus verweigert den Passbild-Upload eines Asiaten wegen angeblich geschlossener Augen. Richard Lee's attempt to renew his passport was…