Eigentlich klingt die ganze Sache ja eher wie ein April-Scherz: Mit Super-Resolution soll es gelingen, die Auflösung von einzelnen Videoframes spürbar zu erhöhen. Dabei kommen auch Bilddetails zum Vorschein, die bei reiner (zb. bikubischer) Interpolation nicht zu sehen sind.
Seit geraumer Zeit werden auf diversen Kongressen immer wieder Demonstrationen dieses Algorithmus gezeigt, die einen erst einmal ungläubig den Kopf schütteln lassen: Da werden unscharfe und vermatschte Schriften plötzlich klar lesbar, oder unscharfe Strukturen zeigen plötzlich nie erwartete Details.
Die Idee
Die Idee ist so einfach, wie genial. Betrachtet man einen Videoframe nicht einzeln sondern auch seine Vorgänger und seine Nachfolger im Clip, so werden alle bewegten Objekte pro Bild leicht verschoben aufgezeichnet. Bei einem fahrenden Auto ist dies klar, jedoch passiert natürlich ähnliches auch bei einem (lebendigen) Gesicht oder einer Kameraaufnahme ohne Stativ.
Die Objekte verschieben sich höchstwahrscheinlich jedoch nicht pixelweise vor dem CCD, sondern sie bewegen sich im sogenannten Subpixelbereich. Von der perspektivischen Verzerrung einmal abgesehen, kann man sich so die Informationen aus verschiedenen Bildern zunutze machen und erhält über die Zeit mehr Detailinformation zu einem Objekt. Um die einzelnen Objekte zu verfolgen kann man sich die Bewegungsschätzung moderner Codec-Forschung zunutze machen.
Wie in der folgenden Abbildung vereinfacht dargestellt errechnet der Super-Resolution-Algorithmus aus drei unscharfen, aber im Subpixel-Bereich verschobenen Bildern ein scharfes Bild:
Das ganze klingt jetzt etwas unglaubwürdig, jedoch haben unter anderem einige Microsoft-Ingineure herausgefunden, dass sich die Bildinformation bei diesem Verfahren im optimalem Fall tatsächlich um den Faktor 1,6 erhöhen lässt. Oder in Zahlen: Ein DV-Bild (720 x 576 Pixel) könnte mit der zusätzlichen Information auf die Größe 1152 x 921 aufgeblasen werden, was ja schon ziemlich nah an 720p liegen würde.
Wer sich für die näheren Details zu Super-Resultion interessiert stößt über Google auf die gesamten mathematischen Grundlagen. Hier oder hier kann man auch über die Ergebnisse staunen, die unter "Laborbedingungen" erzielt worden sind (man achte besonders auf die Verbesserung von schrägen Linien). Sollte dieser Algorithmus tatsächlich auch in der Praxis derart fantastische Ergebnisse liefern -die übrigens enorme Rechenleistung verschlingen- dürfte es sicherlich nicht mehr lange dauern, bis dieser Algorithmus sich auch in Standard-Videoschnitt- und Compositing-Programmen wieder findet. Sei es zur Extraktion von Standbildern aus Videofilmen (z.B. Für den Posterdruck), oder als hochqualitativer HDV-Upscaler für DV-Material. Oder natürlich als verbesserter Schärfefilter.
