Multimediale Darstellung

Inhalt

- Definition : was ist multimediale Darstellung

-was ist Multimedia

-was bedeutet die intelligente Darstellung; Anforderungen

- Informationszugang mit Hilfe der 3C-Architektur; das Holistic-System

-Ziel, Anforderung und Merkmale von Holistic

-Architektur und Bestanteile

-Ablauf einer Suche

- Das TELLIM-System

-Ziel und Anforderung

-Architektur und Bestandteile

-Zusammearbeit der Komponenten

- Intelligente Multimediadarstellung mit Hilfe von semantischen Folgerungen

-Ziel und Anforderung

-Architektur des Systems und Komponenten

-Beispiel einer Darstellung

Was ist multimediale Darstellung

Was ist Multimedia:

Sammelbezeichnung fuer Produkte und Dienstleistungen aus dem Computer-, Telekommunikations-, ud Unterhaltungs- und Medienbereich. Merkmale von Multimedia-Anwendungen sind gemeinsame Verwendung verschiedner statischer (Text, Foto) und dynamischer (Audio, Video, Animation) Medientypen. Multimedia wird durch vier Merkmale charakterisiert:

* Digitalisierung,

* computerbasierte Integration,

* multimodale und multicodale Präsentation sowie

* anwendergesteuerte (interaktive) Nutzung

Was bedeutet intelligente Darstellung von Multimedia

Unter intelligenter Darstellung von Multimedia versteht man die strukturierte Repraesenentation von Multimedia. Anforderungen sind, dass der Benutzer das bekommt was er sucht und dass das Ergebnis nach seinen Wuneschen strukturiert wird.

Das Holistic-Zugangsparadigma

Ziel:

Entwicklungs eines Systems, welches die Suche nach Informationen im Internet mit einem ausgedehnten Kontext betrachtet

Anforderungen:

Das System soll folgende Eigenschaften erfüllen

-bei der Suche miteinbeziehung des Kontextes der Frage und dem Interesse des Suchers.

-proaktive Suche, heisst es soll im voraus gesucht werden und Resultate in einer Gebietswissensstruktur eingeordnet werden

-Anfrage soll auf abstraktem Niveau gebracht werden, indem ein konzeptgegründeter Zugang benutzt wird

Merkmale von Holistic

Es erfüllt die oben aufgehürten Anforderungen indem es

-Kontextsentitiv

-Konzeptgegründet

-und proaktiven Zugang hat

indem es den Kontext sehr ausgedehnt betrachtet

Kontextsentitiv bedeutet

-enthält d. Kontext der Anfrage

-mit Hilfe v. Tabellen, werden Gemeinsamkeiten mit anderen Informationsquellem gefunden

-enthält auch d. Wissen über die Interessen des Suchers

Konzeptgegründet bedeutet

-heisst es ird wie früher mit Svhlüsselwörtern oder Phrasen gesucht

-es werden Zugangsprimitive Konzepte benutzt

Proaktiv bedeutet

-Die InformationszugangWerkzeuge führen im voraus Klassifikationen durch, die auf Hintergrundwissen des Suchers basieren

-Suchergebnisse werde in einem Gebietswissendokument gespeichert

Die Architektur des Holistic-Systems

Die Architektur des Holisitc-Systems beinhaltet die integrations des 3C-Wissens, also die integration von Inhalt, Kontext und Allgemeinhintergrund

Das Systembesteht aus 4 Hauptbestandteilen

-Inhaltanalysator (content analysator)

-Kontextanalysator (context analysator)

-Bedeutungsberechnungsmodul (revalance-score-computation-modul)

-Multimediakonzeptwörterbuch (multimdedia concept dictionary)

Der Inhaltanalysator (content analysator)

-besteht aus Objekt-Detektor, Audio-Analyser und Video-Analyser

-mit Hilfe der Analysatoren werden Multimediaelemente gefunden und ermittelt die Gegenstände des Interesses und kennzeichnet diese

-die extrahierten Informationen werden in einem Themendiagramm des Inhalts in XML angedsammelt und teilweise ans Bedeutungskerbemdul geschickt

Der Kontextanalysator (context analysaor)

-verarbeitet Kontextinfomation des vorliegenden Dokuments

-er besteht aus einer unabhängigen Bereichs-Analyse (domain independent analysis) und einer spezifischen Bereichs-Analyse (domain specific analysis)

-die unabhängige Analyse beauftragt den POS-Tagger (part-of-speech) um Schlüsselkonzepte zu extrahieren und zu kennzeichnen

Das Bedeutungkerbemodul (revelance score computation module)

-integriert die Eigenschaften des Inhalts- und Kontextanalysators

-es berechnet für jedes Multimdiaelement einen Bedeutungsgrad(kerbe)

Das Multimdiakonzeptwörterbuch (multimdedia concept dictionary)

-es arbeitet als Diagrammstruktur und verbindet Konzepte mit Multimediaelementen

-dient als Schnittstelle zwischen Multimediabibliothek und Gebietswissen (multimedia library)

Das TELLIM-System

Ziel:

Produktdarstellung dem Interesse und Vorliebe der Kunden, und den gegebenen Voraussetzungen(Hard- und Software) anpassen

Anforderung:

-aufbauen von Vertrauen (Datenschutz)

-Spass; Kunde soll (möglichst) ungestört sein

-Geschwindigkeit; Darstellung muss sehr schnell geschehen

-Design; die richtigen Informationen attraktiv darstellen

-Wiederverwendung; Aktualisierung sollte arbeitsarm sein

System besteht aus vier Bestandteilen:

-Datenbank(data base)

-enthält grundlegendeDokumente der Darstellung (basic documents)

-diese könne sein: Texterklärungen, ausführliche Informationen, Bilder, Audio, Animationen oder VR-Welten

-Downloadzeitkommandogerät(download time predictor)

-besteht aus Dialog und Test

-der Dialog bittet Benutzer um seinen Anschluss(Modem,ISDN usw...)

-der Testschätzt tatsächliche Kapazität des Netzes

-Benutzerverhalten(user behaviour) wird gebildet durch

-Beobachter (observer)

-Archivmodul (history)

-Mittelmanagmentmodul (media management)

-Dokumentengenerator(document generator)

-erzeugt das Dokument, das dem Benuter dargestellt wird

Die Architektur des TELLIM-Systems

Erstellen von Benutzerverhalten durch die user modelling component

-der Beobachter(observer) registriert Benutzerverhalten, z.B. Gewaehlte Verbindungen, wie lange Daten benutzt werde etc. Mit einem Regelbasierenden-System wird entschieden, ob Informationen benutzt werden oder nicht. Daten werden an das Archivmodul(history) uebergeben

-das Archivmodul speichert alle Aktivitaeten des Benutzers der Darstellungsreihenfolge nach in einer Historyliste. Diese erhaelt alle Erganezungen, die der Benutzer im aktuellen Dokument waehlen kann. Die Historyliste holt sich von der Datenbank die Ergaenzungen und vergleicht, welche Erganzung der Benutzer tatsaechlich gewaehlt hat und vergleicht diese mit der Vorhersage des Mittelmanagmentmoduls. Falls Widerspruch, uebergibt das Archivmodul dem Mittelmanagmentmodul die tatsaechlich genutzte Ergaenzung.

-das Mittelmanagmantmodul(media managment) lernt so die Vorlieben des Benutzers mit einem Lernalgorithmus, der eine Entscheidungsliste liefert. Das Modul besteht aus zwei Teilen: der eine sagt vorraus, um welche Ergaenzungen der Benutzer wahrscheinlich bitten wird und speichert es in dem Archivmodul. Kommt es zum Widerspruch, ethaelt das zweite Modul die tatsaechliche Ergaenzung und verbessert die Entscheidungsliste mit dem Lernalgorithmus

Die Architektur des TELLIM-Systems

Die Architektur des TELLIM-Systems

Arbeitsweise des Dokumentengenerators

-der Dokumentengenerator enthaelt alle Dokumente und moegliche Ergaenzungen

-es erfragt fuer jede Erganezung das Downloadzeitkommandogeraet um die Downloadzeit und bittet das Mittelmanagmentmodul um eine Voraussage des Benutzerverhaltens

-je nach Antwort, generiert der Generator die Ergaenzung in das Dokument oder erstellt ein neues mit der Erganzung und fuegt einen Link in das gegenwaertige Dokument ein

Intelligente Multimediadarstellung mit Hilfe von semantischen Schlussfolgerungen

Ziel:

Entwicklung eines Systems zur intelligenten Darstellung von semantisch verbundener Multimedia

Anforderung:

-semantische Zusammenhänge, im Vergleich zu heute, nicht ignorieren

-System soll Mulltimedia-Inhalt intelligent darstellen, das heisst der Sucher soll bekommen was er sucht

Architektur des Systems

Die Darstellungserzeugung findet in 5 Schritten statt:

-wiederholender Suchprozess(interak. Search)

-der Benutzer greift aktiv in die Suche ein, indem er Resultate deutet und den Suchfokus bestimmt

-semantische Folgerung(sem. Inferencing)

-Verwendung von Dublinkernmetadata, um sem. Verhältnisse zwischen den Mittelgegenständen zu finden

-räum. und zeit. Abbilden(sp./temp. Mapping

-die sem. Verhältnisse werden auf räumliche und zeitliche Verhätnisse abgebildet

-Erzeugung der Darstellung

-erzeugung einer Multimediadarstellung der Mittelgegenstände mit Hilfe der sem. Verhältnisse und anderen Begrenzungen

-Benutzer-gelenkter Darstellungsgenerator

-Benutzer kann Fokus der Darstellung ändern und neue Darstellung erzeugen, indem er im aktuellen Dokument einen Gegenstand seines Intersses anklickt

Architektur des Systems

Der wiederholende und wechselwirkende Suchprozess

-dieser Prozess manipuliert die Dublinkernelemente nach jedem Suchstadium, wodurch immer mehr sem. Verhätnisse gemacht werden können

-er funktioniert nach folgendem Schema

-Benutzer gibt Schlüsselwort ein und das System führt Suche im Archiv über die Metadaten dc.title und dc.subject aus; Resultat wird in traditioneller Listenform dargestellt

-der Benutzer kann die Suche lenken, indem er auf den Gegenstand seines Interesses klickt

-begründet auf dieser Wahl wendet das System die semantischen Folgerungen mit dem Dublinkern an, um mit den Metadaten der Gegenstände eine neue Suche zu starten

-durch eine solche wiedergolte Bearbeitung werden immer mehr semantische Verhältnisse geschlossen, die den Benutzer interessieren, der damit den Suchfokus bestimmt

Architektur des Systems

Die semantische Folgerung mit Dublinkern*

-

*Metadatenformat zur Beschreibung von Dokumenten und Objekten im Internet. Kann in XML oder RDF abgespeichert werden

Architektur des Systems

Abbilden von semantischen zu zeitlich-räumlichen Verhältnissen

Architektur des Systems

Der Darstellungsgenerator Cuypers

-nach dem Abbilden erstellt der Generator eine Darstellung der sem. verwandten Gegnstände dar. Dies geschicht in 5 Verarbeitungsschichten

-semantische Strukturschicht

-sehr abstrakte Schicht; noch kein layout Beschreibung

-die Präsentation wird in semantischn Beziehungen beschrieben

-nächste Schicht...

-mitteilsame Vorrichtungsschicht

-abstrakte Layoutbeschreibung

-Festlegung der Reihenfolge der Multimediagegenstände

-z.B. nach Kultur Rei.-Folge von rechts nach links oder umgekehrt

-Sammelstrategie; je nach Benutzer/Autor passende Bilder auf verschiedne Seiten verteilen oder nicht

-Festlegung von Inhalt auf Seite oder aufspaltung in mehrere Seiten

-qualitative Begrenzungsschicht

-genauere Fetslegung der Positionen der Elemente und Anordnung der Elemente

-dabei werden von Cuypers numerische Begrenzungen beachtet

-quantitative Begrenzungsschicht

-Festlegung des gewünschten zeitlichen und räumlichen Layouts

-abschliessendes Formdarstellungsschicht

-kodiert die Darstellung eines Dokuments z.B. in HTML

-überprüfung, ob der Sucher das Format lesen kann

Beispiel

-Ein Benutzer ist nach dem Leben des ehemaligen Präsidenten Abraham Lincln interessiert und sucht nach „Lincoln“ in den OAI-Archiven

-Das Resultat umfasst eine bestimmte Anzahl von Bildern, Portraits, Dokumenten, nachrichtenartikel über die Ermordung, und ein Artikel über sein Leben. Zwei Gegenstände und ihre metadtaen könnten die folgenden sein

<title>Abraham Lincoln</title>

<creator>Gardner</creator>

subject>Abraham Lincoln</subject>

<subject>President</subject>

<description>Photograph of Abraham Lincoln taken in

Washington</description>

<date>1862</date>

<type>photograph</type>

<type>image</type>

<title>Draft of the Emancipation

Proclamation</title>

<creator>Abraham Lincoln</creator>

<subject>Emancipation Proclamation</subject>

<description>Draft of the Emancipation Proclamation

by President Abraham Lincoln, July 22,

1862</description>

<date>22/7/1862</date>

<type>hand written document</type>

<type>image</type>

Mit den Metadaten lässt sich schliessen, dass links der Schöpfer des rechten Dokumentes ist, siehe subject und creator. Datum zeigt an, dass das Foto und das Dokument in der fast gleichen Zeit ist. Es findet eine Abbildung in die räumichen und zeitlichen Verhältnisse statt. Der Artikel hat feste Reihenfolge von seiner Biographie über einen Artikel bis zu seinem Tod.

2004-05-09T21:47:20