KI und neuronale Netze halfen einem Reddit-Benutzer, einen alten Film in eine 4K-Auflösung mit 60 Bildern pro Sekunde umzuwandeln.
Einer der bekanntesten Clips in der Geschichte des Kinos ist der Kurzfilm „L’Arrivée d’un Zug à La Ciotat“ (oder Die Ankunft eines Zuges zum Bahnhof La Ciotat), ein Video von etwas mehr als 50 Sekunden, das von der Brüder Lumière. Wie Sie sich vorstellen können, wurden die Kameras der damaligen Zeit ursprünglich im Jahr 1896 aufgenommen und haben keinen Ton aufgenommen. Daher war es bereits eine Meisterleistung, das Bild in Bewegung zu halten. Jetzt können Sie diesen Film in 4K mit 60 fps sehen.
AI füllte die Pixel, um die Auflösung auf 4K zu erhöhen
Denis Shiryaev, ein Reddit-Benutzer, entschied sich dafür verbessern der Klassiker mit Hilfe von Technologie. Er begann mit einem Tool namens die Bildauflösung auf 4K zu skalieren Gigapixel AI von Topaz Labs.
Mit diesem Werkzeug können Sie Pixel erzeugen, um das Originalbild zu vergrößern und eine höhere Auflösung mit maximal möglichen Details zu erzielen. Sie können das Originalvideo unten sehen:
Neben der Verbesserung der Auflösung gelang es ihm auch, die Bildrate zu erhöhen. Etwas, das die Ausgabe flüssiger macht.
Wie Sie sehen können, sehen die Bewegung des Zuges und die Personen, die durch die Szene gehen, vollkommen reibungslos aus. Es gibt kaum Bewegungsunterbrechungen, was es völlig anders macht als das Original. KI wird hier verwendet, um die zusätzlichen Frames zu füllen, sodass das Endergebnis absolut hypnotisch ist.
Zu diesem Zweck verwendete Shiryaev ein verwendetes Tool namens DAIN, das eine Reihe von superkomplexen Prozessen ausführt, die diese nicht vorhandenen Löcher mit Bildern füllen, die perfekt mit dem Rest des Films synchronisiert sind.
Um dies zu erreichen, analysiert das Tool die Bilder, um den visuellen Fluss der Szene, den Kontext und die Tiefe zu erfassen. Anschließend wird eine Heatmap erstellt, die das perfekte Bild für den Rahmen erzeugt.
Und dann fügte er Sounds als letzten Schliff hinzu.
