Generative KI kann Ihre wertvollsten Erinnerungen in Fotos verwandeln, die es nie gab

Bisher hat Domestic Data Streamers die Technik eingesetzt, um die Erinnerungen von Menschen in verschiedenen Migrantengemeinschaften zu bewahren, darunter koreanische, bolivianische und argentinische Familien, die in São Paolo, Brasilien, leben. Es wurde aber auch mit einem Pflegeheim in Barcelona zusammengearbeitet, um herauszufinden, wie gedächtnisbasierte Rekonstruktionen älteren Menschen helfen könnten. Das Team arbeitete mit Forschern in Barcelona an einem kleinen Pilotprojekt mit 12 Probanden zusammen und wandte den Ansatz auf die Erinnerungstherapie an – eine Behandlung von Demenz, die darauf abzielt, die kognitiven Fähigkeiten zu stimulieren, indem jemandem Bilder aus der Vergangenheit gezeigt werden. Die in den 1960er Jahren entwickelte Reminiszenztherapie hat viele Befürworter, doch die Forscher sind sich nicht einig, wie wirksam sie ist und wie sie durchgeführt werden sollte.

Das Pilotprojekt ermöglichte es dem Team, den Prozess zu verfeinern und sicherzustellen, dass die Teilnehmer ihre Einwilligung nach Aufklärung geben konnten, sagt Garcia. Die Forscher planen nun, im Sommer eine größere klinische Studie mit Kollegen der University of Toronto durchzuführen, um den Einsatz generativer Bildmodelle mit anderen Therapieansätzen zu vergleichen.

Eine Sache, die sie im Pilotprojekt herausgefunden haben, war, dass sich ältere Menschen viel besser mit den Bildern identifizieren konnten, wenn sie sie ausgedruckt hatten. „Wenn sie sie auf einem Bildschirm sehen, haben sie nicht die gleiche emotionale Beziehung zu ihnen“, sagt Garcia. „Aber als sie es physisch sehen konnten, wurde die Erinnerung viel wichtiger.“

Unscharf ist am besten

Die Forscher haben außerdem herausgefunden, dass ältere Versionen generativer Bildmodelle besser funktionieren als neuere. Sie starteten das Projekt mit zwei Modellen, die 2022 herauskamen: DALL-E 2 und Stable Diffusion, ein kostenloses generatives Bildmodell, das von Stability AI veröffentlicht wurde. Diese können fehlerhafte Bilder mit verzerrten Gesichtern und verdrehten Körpern erzeugen. Doch als sie auf die neueste Version von Midjourney umstiegen (ein anderes generatives Bildmodell, das detailliertere Bilder erstellen kann), kamen die Ergebnisse bei den Leuten nicht so gut an.

„Wenn man etwas Superrealistisches macht, konzentrieren sich die Leute auf Details, die nicht da waren“, sagt Garcia. „Wenn es verschwommen ist, kommt das Konzept besser rüber. Erinnerungen sind ein bisschen wie Träume. Sie verhalten sich nicht wie Fotos mit forensischen Details. Sie können sich nicht erinnern, ob der Stuhl rot oder grün war. Man erinnert sich einfach daran, dass da ein Stuhl war.“

„Als sie es physisch sehen konnten, wurde die Erinnerung viel wichtiger.“

@MARCASENSIO_FOTO

Seitdem verwendet das Team wieder die älteren Modelle. „Für uns sind die Störungen ein Merkmal“, sagt Garcia. „Manchmal können Dinge da sein und nicht da sein. Es handelt sich um eine Art Quantenzustand in den Bildern, der sehr gut mit Erinnerungen harmoniert.“

Sam Lawton, ein unabhängiger Filmemacher, der nicht am Studio beteiligt ist, ist von dem Projekt begeistert. Er freut sich besonders darüber, dass das Team die kognitiven Auswirkungen dieser Bilder in einer strengen klinischen Studie untersuchen wird. Lawton hat generative Bildmodelle verwendet, um seine eigenen Erinnerungen wiederherzustellen. In einem Film, den er letztes Jahr gedreht hat, heißt Erweiterte Kindheitnutzte er DALL-E, um alte Familienfotos über ihre Grenzen hinaus zu erweitern und echte Kindheitsszenen mit surrealen zu verwischen.

„Die Wirkung, die der Kontakt mit dieser Art erzeugter Bilder auf das Gehirn einer Person hat, war der Auslöser für mich, den Film überhaupt zu machen“, sagt Lawton. „Ich war nicht in der Lage, eine umfassende Recherchearbeit zu starten, also habe ich mich der Art des Geschichtenerzählens zugewandt, die für mich am natürlichsten ist.“

source site

Leave a Reply