Portivity - Portable Interactivity
Portivity - Portable Interactivity

The objective of the PorTiVity project is to develop and experiment a complete end-to-end platform providing Rich Media Interactive TV services for portable and mobile devices. Interactivity is based on a moving objects level in the TV-programme. The whole system consists of an authoring tool which offers methods for fast annotation and navigation, the playout component for preparation of the data to send and the required software for the handheld receiver to present data and for the interaction with the user. Major task of the Institute of Information Systems & Information Management is the implementation of authoring tools. Therefore an existing MPEG-7 annotation tool will be adjusted which allows a description of the object positions in the video stream with lower user effort. The aim is to minimize the number of positions in the video, where the user has to manually specify the object image region. The object positions in the video are determined by ?Video Object Tracking? and by automatic object identification in different video segments (?Object-Redetection?). With a further tool which will be developed in the course of this project, the proper interactive video programme is generated using MPEG4-LASER format, based on the video MPEG-7 description. There with it is possible to define the interaction for annotated objects, to show menus in the video or to define a programme logic (eg: for games).

Im Projekt wird ein System für die Erstellung, Ausstrahlung und den Empfang interaktiver Inhalte für mobile Endgeräte entwickelt. Interaktivität wird hier auf Ebene einzelner Objekte, die sich im Videoinhalt befinden, ermöglicht. Das Gesamtsystem besteht aus einem Authoringteil, das Methoden zur schnellen Annotation und Navigation zur Verfügung stellt, der Playoutkomponente  zur Aufbereitung der zu sendenden Information, sowie der speziellen Software für das mobile Endgerät um die Informationen darzustellen und die Interaktion mit dem Benutzer zu nützen.

Hauptaufgabe des IIS&IMA im Projekt ist die Entwicklung der Authoring-Applikationen. Hierzu soll ein bereits bestehendes MPEG-7 Video Annotierungstool dahingehend erweitert werden, dass mit möglichst geringem Benutzeraufwand eine Beschreibung von Objektpositionen im Video erstellt werden kann. Ziel ist es, dass man an möglichst wenig Stellen im Video die Bildregion der Objekte manuell spezifizieren muß. Die Objektpositionen im gesamten Video werden dann automatisch durch Erfassung der Objektbewegung ('Object-Tracking') und durch die automatische Erkennung des Objektes in verschiedenen Videosegmenten ('Object-Redetection') ermittelt.

Mit einem weiteren Tool, das wir im Rahmen dieses Projektes entwickeln, erstellt man ausgehend von den MPEG-7 Beschreibungen des Videos das eigentliche interaktive Videoprogramm im MPEG-4 LASER Format. Damit ist es möglich, für die annotierten Objekte die Interaktion fest zulegen, Menüs im Video einzublenden, oder eine Programm-Logik (z.B. für Spiele) zu definieren.

Siehe auch: porTiVity-Webseite

 

Portivity - Portable Interactivity

The objective of the PorTiVity project is to develop and experiment a complete end-to-end platform providing Rich Media Interactive TV services for portable and mobile devices. Interactivity is based on a moving objects level in the TV-programme. The whole system consists of an authoring tool which offers methods for fast annotation and navigation, the playout component for preparation of the data to send and the required software for the handheld receiver to present data and for the interaction with the user.

Major task of the Institute of Information Systems & Information Management is the implementation of authoring tools. Therefore an existing MPEG-7 annotation tool will be adjusted which allows a description of the object positions in the video stream with lower user effort. The aim is to minimize the number of positions in the video, where the user has to manually specify the object image region. The object positions in the video are determined by ?Video Object Tracking? and by automatic object identification in different video segments (?Object-Redetection?).

With a further tool which will be developed in the course of this project, the proper interactive video programme is generated using MPEG4-LASER format, based on the video MPEG-7 description. Therewith it is possible to define the interaction for annotated objects, to show menus in the video or to define a programme logic (eg: for games).

See also: porTiVity-Website