Wie KI-Upscaling bessere Fotos machen könnte

Inhaltsverzeichnis:

Wie KI-Upscaling bessere Fotos machen könnte
Wie KI-Upscaling bessere Fotos machen könnte
Anonim

Key Takeaways

  • Neue Fortschritte bei der Vergrößerung von Bildern könnten bei allem helfen, von Familienfotos bis hin zu medizinischer Bildgebung.
  • Google-Forscher gaben bekannt, dass sie bei der Verwendung von KI zur Erhöhung der Fotoauflösung Durchbrüche erzielt haben.
  • Aber ein Experte sagt, dass Upscaling-Software für Standfotografen möglicherweise nicht notwendig ist.
Image
Image

Neue Techniken, die Bilder mithilfe von KI vergrößern, könnten laut Experten alles von Fotos bis hin zu Videospielgrafiken verbessern.

Google-Forscher haben kürzlich über Durchbrüche gesprochen, die sie bei der Erhöhung der Bildauflösung erzielt haben. Die Wissenschaftler verwendeten ein maschinelles Lernmodell, um ein Foto mit niedriger Auflösung in ein detailliertes Bild mit hoher Auflösung umzuwandeln. Es ist Teil eines wachsenden Trends, KI zur Verbesserung von Bildern einzusetzen.

Wir sehen einen Anstieg der KI-gestützten Hochskalierung, insbesondere in Spielen, wo Technologien wie NVIDIA DLSS maschinelles Lernen verwenden, um ein Bild mit viel höherer Auflösung neu zu erstellen, das mit der Qualität der nativen Bilder konkurriert und diese manchmal sogar übertrifft “, sagte der Imaging-Experte Ionut-Alexandru Popa in einem E-Mail-Interview mit Lifewire.

"Diese Art der Hochskalierung funktioniert hervorragend in Computerspielen, wo weniger Ressourcen verbraucht werden, als wenn direkt ein Bild mit höherer Qualität gerendert wird."

Pixel erstellen

Google hat mit einer Methode namens Diffusionsmodelle versucht, Fotos hochzuskalieren.

Das Unternehmen behauptet, dass diese Technik bestehende Technologien verbessert, wenn Menschen gebeten werden, die Ergebnisse zu beurteilen. Ein von Google verwendeter Ansatz heißt SR3 oder Super-Resolution via Repeated Refinement.

"SR3 ist ein Diffusionsmodell mit Superauflösung, das ein Bild mit niedriger Auflösung als Eingabe verwendet und aus reinem Rauschen ein entsprechendes Bild mit hoher Auflösung erstellt", schrieben Google-Forscher in dem Blogbeitrag.„Das Modell wird auf einen Bildverfälschungsprozess trainiert, bei dem Rauschen schrittweise zu einem hochauflösenden Bild hinzugefügt wird, bis nur noch reines Rauschen übrig bleibt.“

Upscaling-Techniken sind nicht neu und werden häufig in Fotobearbeitungsanwendungen verwendet, sagte Popa.

"Es gibt viele Situationen, in denen Sie ein Bild mit höherer Auflösung benötigen, also wird Hochskalieren verwendet, um Pixel zwischen bestehenden zu erstellen", fügte er hinzu. "Die meisten Leute wissen es nicht, aber wenn sie auf ihrem 4K-Bildschirm fernsehen, wird das 1080p-Videosignal automatisch hochskaliert, um den gesamten Bildschirm abzudecken. Dies wird automatisch von Ihrem Fernsehgerät durchgeführt."

Viele aktuelle Techniken werden verwendet, um den Inh alt der neuen Pixel zu „erraten“, damit das resultierende Bild gut aussieht, sagte Popa.

"Derzeit sind die am häufigsten verwendeten Algorithmen für die Bildhochskalierung bilineare und bikubische Methoden, die einen kontinuierlichen Übergang zwischen benachbarten Pixeln mit allmählich wechselnden Farben gewährleisten, aber diese Methode führt oft zu einem Verlust an Schärfe", fügte er hinzu."Dies wird teilweise kompensiert, indem ein Schärfungsdurchgang auf das hochskalierte Bild angewendet wird."

Es gibt viele Situationen, in denen Sie ein Bild mit höherer Auflösung benötigen, daher wird Hochskalieren verwendet, um Pixel zwischen vorhandenen zu erstellen.

Upscaling von Bildern ist entscheidend dafür, wie Unterh altung, Medien und das Internet funktionieren, sagte Fotograf Sebastien Coell Lifewire in einem E-Mail-Interview.

"Zum Beispiel, anstatt mehrere Bildgrößen für eine Webseite zu haben, wie in, eine für die Verwendung auf einem Telefon, eine für ein Tablet", sagte er, "wenn Sie dieses 1080p-Bild auf 2k hochskalieren können oder 4k und dieses Telefonbild auf ein Tablet und 1080p, haben Sie plötzlich die Anzahl der benötigten Bilder von 6 auf 2 reduziert."

"Außerdem sparen Sie den Speicherplatz, der für die großen 2k- und 4k-Dateien benötigt wird, und reduzieren so die benötigte Gesamtdateispeichergröße um etwa 70-90%."

Nicht nur fürs Fernsehen

Hochskalieren von Fotos kann auch die Qualität von Fotos verbessern und könnte sogar bei der medizinischen Bildgebung helfen. Softwareentwickler sagen, dass Upscaling die Auflösung von Bildern ohne Qualitätsverlust erhöhen kann.

Aber Matic Broz, der Gründer der Fotografie-Website Photutorial, sagte Lifewire in einem E-Mail-Interview, dass die tatsächlichen Ergebnisse von der verwendeten Software abhängen.

"Kürzlich hat die KI ihren Weg in die Hochskalierung von Bildern gefunden, obwohl ich bisher nicht davon beeindruckt bin", fügte er hinzu.

Broz sagte, die beste Upscaling-Software, die er verwendet, sei AI Image Enlarger von Vance AI.

Image
Image

"Selbst ihr 8-facher Bild-Upscaler verursacht kein signifikantes Rauschen (das ist eine 64-fache Erhöhung der Auflösung)", sagte er. "Ich gehe davon aus, dass die Algorithmen in den folgenden Jahren nur noch besser werden und eine noch größere Hochskalierung ermöglichen."

Für Standfotografen, so Broz, sei es eine offene Frage, ob Bild-Upscaler notwendig seien.

"Kameraentwickler verbessern ständig die Auflösung von Kamerasensoren, jetzt sogar mit einer Auflösung von 100 MP+", fügte er hinzu. "Ich persönlich habe 24 MP und etwa 50 MP verwendet, und ich hatte nie das Bedürfnis nach größeren Bildern, nicht einmal nach großen Ausdrucken."

Empfohlen: