Vorsicht – wer „The Mandalorian“ derzeit auf Disney+ anschaut, dürfte dies wohl als Spoiler werten – also nicht weiterlesen. Für den Rest gilt: Derzeit kursiert auf YouTube vom DeepFake Operator „Shamook“ ein Remake einer Sequenz aus "The Mandalorian", in der der junge Luke Skywalker (von 1977) einen Gastaufritt hat. Industrial Light & Magic hat diesen Gastauftritt mit herkömmlicher CGI dem jungen Luke Skywalker angepasst.
Dass es noch deutlich besser geht, zeigt Shamook mit seinem auf DeepFake basierten YouTube Clip. Auch für uns stellt Shamooks „Alternativ-Szene“ die deutlich realistischere Version des jungen Skywalkers (Mark Hamill) dar. Die Frage, die sich hierbei aufdrängt lautet: Wieso setzt nicht ILM ebenfalls auf Machine Learning, um solche sogenannten „Faceswaps“ zu berechnen?
Das dürfte allerdings nur noch eine Frage der Zeit sein: Zwar existiert unserer Kenntnis nach noch keine DeepFake Software im Produktionsstadium, welche die erforderliche Auflösung und Farbtiefe von aktuellen Blockbustern unterstützt und zeitlich perfekt kohärent ist. Für YouTube-Auflösungen reichen aktuelle Tools wie das populäre DeepFaceLab aus – wer jedoch matchendes DeepFake-Material für die ARRI Alexa LF (Hauptkamera bei The Mandalorian) produzieren muss, steht vor einer ganz anderen Herausforderung.
Doch Disney arbeitet bereits mit einem Team der ETH Zürich an einer entsprechenden software, welches höhere Auflösungen als die bisherigen Tools unterstützt. Allerdings weist das Disney Tool erst eine Auflösung von 1.024 x 1.024 Pixeln auf, was zwar ein großer Sprung gegenüber den bisherigen Verfahren ist, die oft nur eine Auflösung von 256 x 256 Pixeln ermöglichen (das im Mandalorian Clip verwendete DeepFaceLab unterstützt sogar schon 448 x 448 Pixel), aber noch lange nicht genug für die in professionellen Produktionen nötige Qualität mit Auflösungen von FullHD oder sogar 4K. Aber die Entwicklung im Bereich DeepFakes schreitet schnell voran und wir werden wohl nicht mehr lange auf Profi-DeepFakes in bester Qualität warten müssen.
Es soll nach Angaben von Disney der erste Algorithmus sein, welcher in der Lage ist, Ergebnisse in Megapixel Qualität zu liefern, welche zudem auch zeitlich kohärent sind. Und tatsächlich sehen die Ergebnisse schon sehr gut aus.
„Authentizität“ dürfte damit noch begehrter werden – als es dies ohnehin schon ist ;-)