Servicenavigation

Detailseite

Zurück

Projekt Druckansicht

Skalierbare Algorithmen für 3D Videoobjekte unter Berücksichtigung subjektiver Qualitätsfaktoren

Fachliche Zuordnung Bild- und Sprachverarbeitung, Computergraphik und Visualisierung, Human Computer Interaction, Ubiquitous und Wearable Computing
Förderung Förderung von 2009 bis 2013
Projektkennung Deutsche Forschungsgemeinschaft (DFG) - Projektnummer 86423388
 
Erstellungsjahr 2012

Zusammenfassung der Projektergebnisse

Im Projekt wurden Algorithmen der Stereoanalyse und Bildsynthese im Kontext des Anwendungsfalls "private Videokommunikation“ erforscht. Ziel war es, durch die Erzeugung einer virtuellen Ansicht der Kommunikationsteilnehmer die Lösung des Problems des "Nicht angesehen werdens“ zu beseitigen und somit künstlich Blickkontakt herzustellen. Für die Evaluierung wurden weiterentwickelte subjektive Methoden angewendet. Stand im Projektantrag noch die Skalierbarkeit der Algorithmen im Vordergrund, so wurde schnell offensichtlich, dass im Anwendungsfall der Heimvideokommunikation zunächst die erzeugbare Bildqualität der Ergebnisse Vorrang haben muss. Einfache Webkameras mit geringer Bildqualität stellten eine hohe Herausforderung dar. Robuste lokale und globale Algorithmen wurden für die Stereoanalyse weiterentwickelt. Dabei stand die Verbesserung der Disparitätskarten durch Nachbearbeitung wie Inpainting und bewegungskompensierte zeitliche Glättung im Vordergrund. Für die Synthese der Ansicht wurden Maßnahmen zur Artefaktvermeidung untersucht. Methoden zum Füllen kleinerer Löcher, das Beseitigen von fehlplatzierten Punkten, die Anwendung von Anti-Aliasing, sowie das Füllen von fehlenden Bildbereichen mittels eines neuen konturbasierten Ansatzes sind die wichtigsten Ergebnisse der durchgeführten Arbeiten. Geringe Komplexität und die Parallelisierbarkeit der Algorithmen waren dabei stets nicht-funktionale Anforderungen an die Algorithmen. Die Entwicklungen geschahen unter der Berücksichtigung von subjektiven Qualitätsfaktoren welche durch subjektive Qualitätsbeurteilungen detektiert werden konnten. Eine Beurteilung der Qualität anhand objektiver Maße wurde unter der Prämisse, subjektive Qualitätsfaktoren zu berücksichtigen, nicht als sinnvoll erachtet. Auch gab es zur technischen Realisierbarkeit objektiver Maße zu viele ungeklä rte Sachverhalte, die im Rahmen des Projekts nicht hätten gelöst werden können. Um im Rahmen des Algorithmenerstellungsprozesses von der subjektiven Qualitätsburteilung profitieren zu können, wurde dafür ein Modell uber die Qualitätstaxonomie entwickelt. Dies dient als Überblick, Orientierung, und Zuordnungshilfe um Zusammenhänge der komplexen Erstellungsschritte mit der nicht minder komplexen subjektiven Qualitätswahrnehmung besser identifizieren zu können. Nicht zuletzt soll davon die (Weiter-)entwicklung von objektiven Qualitätsmaßen zur Beurteilung von 3D-Videoobjekten profitieren. Im Rahmen zweier umfangreicher subjektiver Studien wurde die erreichbare Bildqualität der Algorithmen evaluiert. Neben klassischen Methoden der subjektiven Beurteilung wie qualitative Befragungen und standardisiertem (ITU-T P.910) Absolute Category Rating (ACR) nach kam dabei auch erstmals die neue Methode des Open Profilings of Quality (OPQ) zum Einsatz. Die subjektiven Studien zeigen klar, das das Ziel der Wiederherstellung des Blickkontaktes durch eine virtuelle Ansicht erreicht wurde. Obwohl durch die neu entwickelten Methoden die Qualität der Ansicht verbessert werden konnte, so ist diese noch immer nicht als akzeptabel zu bezeichnen. Eine direkte Verwertung der Forschungsergebnisse in einer (kommerziellen) Anwendung ist daher noch nicht sinnvoll. Gründe dafür sind einerseits die sich aus dem Anwendungsfall ergebenen hohen Anforderungen durch die einfache Hardware. Auch sind die visuellen Artefakte, die durch die Synthese entstehen, bisher wenig bekannt und erzeugen somit einen stärkeren negativen Eindruck als gängige Fehlertypen wie Blockartefakte oder Rauschen. Dennoch sind bestimmte Algorithmenbestandteile ein wertvoller Beitrag zum Stand der Technik. Der Stand der Technik in dem Bereich zeigt bereits Ergebnisse mit höherer Qualität, jedoch meist auch unter dem Einsatz aufwändigerer Hardware oder komplexerer Algorithmen. Ein direkter Vergleich war mangels objektiver Maße sowie wegen zu unterschiedlicher Voraussetzung an Aufnahme und Repräsentationsform nicht möglich. Es bedarf noch weiterer Forschung auf dem Gebiet. Bessere Kameras sowie leistungsfähigere Rechner könnten in Zukunft eine bessere Qualität der Synthese unterstützen. Aufgrund der Vielzahl von Algorithmenvarianten ist ein objektives Maß unbedingt notwendig, um eine automatisierte Evaluation zu ermöglichen. Die Ergebnisse der subjektiven Studien und des OPQ dieses Projektes geben bereits wertvolle Hinweise, wie ein solchen Maß entwickelte werden kann.

Projektbezogene Publikationen (Auswahl)

 
 

Zusatzinformationen

© 2024 DFG Kontakt / Impressum / Datenschutz

Textvergrößerung und Kontrastanpassung