Faces reconstructed from Brain-Scans

Gepostet vor 10 Monaten, 14 Tagen in #Misc #Science #Tech #AI #Brains #Neuroscience

Share: Twitter Facebook Mail

eigenface0

Wissenschaftler haben Gesichter aus der Hirnaktivität während des Erinnerungsvorgangs extrahiert. Die haben zunächst die Neuro-Reaktion der Versuchsteilnehmer auf über 1000 Gesichter in einem MRI-Scan aufgezeichnet, die Testgesichter wurden schließlich auf 300 „Eigengesichter“ runtergebrochen und man trainierte eine A.I. per Machine Learning auf die mit diesen Eigengesichtern assoziierten Hirnwellen. Damit konnten sie dann nicht nur Gesichter während des Betrachten neuer und noch nicht gesehener Test-Fressen aus der Hirnaktivität rekonstruieren, sondern auch aus der Erinnerung an diese, also ohne direkten visuellen Stimulus.

Die Rekonstruktion ist zwar alles andere als perfekt und Personen lassen sich damit noch nicht identifizieren, aber immerhin.

eigenfaceDuring an fMRI scan, [1000 color photos of different faces] were shown to partcipants one after the other and the neural responses were recorded. The set of faces was then decomposed into 300 eigenfaces [and] Each eigenface represents some statistical aspect of the data. The neural activity associated with each eigenface was then determined in a machine learning step […]

Lee and Kuhl presented participants with test faces that they’d never seen before (i.e. novel faces not in the training dataset). The neural responses to the new faces were analysed to work out the eigenfaces that were activated in the partcipants’ brains (B, above). By summing these predicted eigenfaces, a ‘reconstructed’ face could be created. These eigenfaces were significantly more similar to the actual test faces than would be expected from chance.

It gets better. As well as reconstructing faces from neural activity during perception of the faces (which has been done before), Lee and Kuhl examined neural activity when faces weren’t actually on the screen at all. Participants were given a face recall task, in which they had to hold a face in memory. It turns out that these remembered faces could be reconstructed too, based on the neural activity in a memory-related brain region, the angular gyrus (ANG).

Higher State of Consciousness found

Wissenschaftler haben zum ersten mal einen höheren Bewusstseinszustand nachgewiesen. Dazu haben sie alte Psychedelica-Studien reevaluiert und die sogenannte Neural Signal…

Neural Network cooks with Cthulhu

Janelle Shane spielt mit Neural Networks rum und hat eins davon auf Lovecraft trainiert. Dann hat sie das Neural Network…

Next Level, photorealistic Style-Transfer

In ihrem neuen Paper stellen Fujun Luan, Sylvain Paris, Eli Shechtman und Kavita Bala eine neue Style-Transfer-Methode vor: Figure 1:…

„Alexa? Are you connected to the CIA?“

„I always try to tell the truth.“ This reminds me of those Guilty-Dog-Videos:

AI Brainscans

Graphcore aus Bristol visualisieren künstliche Intelligenzen und Neural Networks: Inside an AI 'brain' - What does machine learning look like?…

Pix2Pix: Neural Network Katzen-Compositing als Browsertoy

Schönes Spielzeug von Christopher Hesse, der ein Neural Network auf Bild-Paaren trainiert hat und mit dem man nun Katzen, Schuhe…

Google Brain does Zoom & Enhance

Vor grob einem halben Jahr bloggte ich über eine Reihe von Papers, die eine neue AI-Anwendung vorstellten: Image Super-Resolution. Die…

NSA-Powerpoint-Styletransfer: Snowden.ppt

Matthew Plummer-Fernandez hat einen Style-Transfer-Algorithmus auf verschiedene NSA-Powerpoint-Slides trainiert und daraus ein paar Snowden-Portraits generiert: Snowden.ppt. Machine Learning style transfer…

Algorithmic Cyclops

Mario Klingemann trainiert wieder irgendwelche Neural Networks die wieder irgendwelche komischen Sachen generieren. Diesmal hat er ’nen Algorithmus auf vintage…

Hieronymus Bosch dreaming of Sesame Street

Chris Rodley dreht nach dem Trump Clan ein paar klassische Gemälde von Picasso und Hieronymus Bosch durch den Sesamstraßen-Neural-Network-Wolf:

Algorithmic Napoleon

/user/vic8760 zieht Jacques-Louis Davids Napoleon Crossing the Alps, MC Escher und die Mona Lisa durch einen FineArt-Style-Transfer. Nice!