MPEG-7

MPEG-7 ist ein Multimedia Inhalt Bezeichnung Standard. Es war standardisiert in ISO/IEC 15938 (Schnittstelle für Multimedia -Inhaltsbeschreibung).[1][2][3][4] Diese Beschreibung wird dem Inhalt selbst zugeordnet, um eine schnelle und effiziente Suche nach Material zu ermöglichen, das für den Benutzer von Interesse ist. MPEG-7 wird offiziell genannt Multimedia -Inhaltsbeschreibung Schnittstelle. So ist es nicht Ein Standard, der sich mit der tatsächlichen Codierung von beweglichen Bildern und Audioen befasst MPEG-1, MPEG-2 und MPEG-4. Es verwendet Xml lagern Metadatenund kann an verbunden werden timecode Um bestimmte Ereignisse zu markieren, oder synchronisieren Text zu einem Lied, zum Beispiel.

Es wurde entwickelt, um zu standardisieren:

  • Eine Reihe von Beschreibungschemata ("DS") und Deskriptoren ("D")
  • eine Sprache, um diese Schemata zu spezifizieren, die als die genannt Beschreibung Definitionssprache ("DDL")
  • Ein Schema zum Codieren der Beschreibung

Die Kombination von MPEG-4 und MPEG-7 wurde manchmal als MPEG-47 bezeichnet.[5]

Einführung

MPEG-7 soll den vorherigen ergänzenden Funktionen bieten MPEG Standards, die Informationen über den Inhalt darstellen, nicht über den Inhalt selbst ("die Bits über die Bits"). Diese Funktionalität ist die Standardisierung von Multimedia -Inhaltsbeschreibungen. MPEG -7 kann unabhängig von den anderen MPEG -Standards verwendet werden - die Beschreibung könnte sogar an einen analogen Film angehängt werden. Die Darstellung, die in MPEG-4 definiert ist, d. H. Die Darstellung von audiovisuellen Daten in Bezug auf Objekte, ist jedoch sehr gut für das geeignet, was auf dem MPEG-7-Standard basiert. Diese Darstellung ist grundlegend für den Kategorisierungsprozess. Darüber hinaus könnten MPEG-7-Beschreibungen verwendet werden, um die Funktionalität früherer MPEG-Standards zu verbessern. Mit diesen Tools können wir eine MPEG-7-Beschreibung erstellen und bereitstellen. Gemäß dem Anforderungsdokument besteht 1 "Eine Beschreibung besteht aus einem Beschreibungsschema (Struktur) und dem Satz der Deskriptorwerte (Instanziationen), die die Daten beschreiben." Ein Deskriptorwert ist "eine Instanziierung eines Deskriptors für einen bestimmten Datensatz (oder eine Teilmenge davon)". Der Deskriptor ist die syntaktische und semantische Definition des Inhalts. Extraktionsalgorithmen befinden sich im Rahmen des Standards, da ihre Standardisierung nicht erforderlich ist, um die Interoperabilität zu ermöglichen.

Teile

Der MPEG-7 (ISO/IEC 15938) besteht aus verschiedenen Teilen. Jeder Teil deckt einen bestimmten Aspekt der gesamten Spezifikation ab.

MPEG-7-Teile[4][6]
Teil Nummer Erstes Public Erscheinungsdatum (Erstausgabe) Letzte Veröffentlichungsdatum (Ausgabe) Letzte Änderung Titel Beschreibung
Teil 1 ISO/IEC 15938-1 2002 2002 2006 Systeme Der architektonische Rahmen von MPEG-7, die Beförderung von MPEG-7-Inhalt-TEM (Textformat für MPEG-7) und das Binärformat für MPEG-7-Beschreibungen (BeschreibungenBim)[7]
Teil 2 ISO/IEC 15938-2 2002 2002 Beschreibung Definitionssprache
Teil 3 ISO/IEC 15938-3 2002 2002 2010 Visuell
Teil 4 ISO/IEC 15938-4 2002 2002 2006 Audio
Teil 5 ISO/IEC 15938-5 2003 2003 2015 Multimedia -Beschreibungsprogramme
Teil 6 ISO/IEC 15938-6 2003 2003 2011 Referenzsoftware
Teil 7 ISO/IEC 15938-7 2003 2003 2011 Konformitätstests
Teil 8 ISO/IEC TR 15938-8 2002 2002 2011 Extraktion und Verwendung von MPEG-7-Beschreibungen
Teil 9 ISO/IEC 15938-9 2005 2005 2012 Profile und Ebenen
Teil 10 ISO/IEC 15938-10 2005 2005 Schema -Definition
Teil 11 ISO/IEC TR 15938-11 2005 2005 2012 MPEG-7-Profilschemata
Teil 12 ISO/IEC 15938-12 2008 2012 Abfrageformat
Teil 13 ISO/IEC 15938-13 2015 2015 Kompakte Deskriptoren für visuelle Suche

Beziehung zwischen Beschreibung und Inhalt

Unabhängigkeit zwischen Beschreibung und Inhalt

Eine MPEG-7-Architekturanforderung ist das Die Beschreibung muss vom audiovisuellen Inhalt getrennt sein.

Andererseits muss es eine geben Beziehung zwischen Inhalt und Beschreibung. Somit wird die Beschreibung mit dem Inhalt selbst multiplexiert.

Auf der rechten Seite können Sie diese Beziehung zwischen Beschreibung und Inhalt sehen.

MPEG-7-Werkzeuge

Beziehung zwischen verschiedenen Werkzeugen und Ausarbeitungsprozess von MPEG-7

MPEG-7 verwendet die folgenden Tools:

  • Deskriptor (d): Es ist eine Darstellung eines Syntakts und semantisch definierten Merkmals. Es könnte sein, dass ein einzigartiges Objekt von mehreren Deskriptoren beschrieben wurde.
  • Beschreibungsschemata (DS): Geben Sie die Struktur und Semantik der Beziehungen zwischen ihren Komponenten an, diese Komponenten können Deskriptoren (D) oder Beschreibungschemata (DS) sein.
  • Beschreibung Definitionssprache (DDL): Es basiert auf der XML -Sprache, mit der die strukturellen Beziehungen zwischen Deskriptoren definiert werden. Es ermöglicht die Erstellung und Änderung von Beschreibungsschemata und auch die Erstellung neuer Deskriptoren (D).
  • Systemwerkzeuge: Diese Tools befassen sich mit Binarisierung, Synchronisation, Transport und Speicherung von Deskriptoren. Es befasst sich auch mit Geistiges Eigentum Schutz.

Auf der rechten Seite können Sie die Beziehung zwischen MPEG-7-Tools sehen.

MPEG-7-Anwendungen

Es gibt viele Anwendungs- und Anwendungsdomänen, die vom MPEG-7-Standard profitieren. Einige Anwendungsbeispiele sind:

  • Digitale Bibliothek: Bild-/Videokatalog, musikalisches Wörterbuch.
  • Multimedia Directory Services: z. gelbe Seiten.
  • Auswahl der Rundfunkmedien: Radiokanal, TV -Kanal.
  • Multimedia -Bearbeitung: Personalisierter elektronischer Nachrichtenservice, Medienautoring.
  • Sicherheitsdienste: Verkehrskontrolle, Produktionsketten ...
  • E-Business: Suchprozess von Produkten.
  • Kulturelle Gottesdienste: Kunstgallerien, Museen ...
  • Bildungsanwendungen.
  • Biomedizinische Anwendungen.
  • Intelligente Multimedia -Anwendungen Diese Einnahme von Multimedia mit niedrigem Niveau Semantik über formelle Darstellung und automatisierte Argumentation.[8]

Software und Demonstranten für MPEG-7

  • Kalif & Emir: Annotation und Abruf von Bildern basierend auf MPEG-7 (GPL). Erstellt MPEG-7 XML-Dateien.[9]
  • C# Implementierung: Open Source-Implementierung der MPEG-7-Deskriptoren in C#.
  • Frameline 47 Video Notation: Frameline 47 aus vielseitigen Liefersystemen. Die erste kommerzielle MPEG-7-Anwendung, Frameline 47, verwendet ein erweitertes Inhaltsschema, das auf MPEG-7 basiert, um ganze Videodateien oder Segmente und Gruppen von Segmenten aus dieser Videodatei gemäß der MPEG-7-Konvention (Segmente und Gruppen von Segmenten aus dieser Videodatei "zu notieren. kommerzielles Werkzeug)
  • Eptascape ads200 Verwendet ein Echtzeit-MPEG 7-Encoder für ein analoges Kamera-Videosignal, um interessante Ereignisse zu identifizieren, insbesondere in Überwachungsanwendungen, überprüfen Sie die Demos MPEG-7 in Aktion (kommerzielles Tool) zu sehen
  • IBM VideoAnnex Annotation Tool: Erstellen von MPEG-7-Dokumenten für Video-Streams, die Struktur beschreiben und Schlüsselwörter aus einem kontrollierten Wortschatz geben (Binärveröffentlichung, restriktive Lizenz)
  • IFINDER MEDIENANALALASE-UND REMENDERSystem: Metadatenextraktion und Suchmaschine basierend auf MPEG-7 (kommerzielles Tool)
  • MPEG-7-Audio-Encoder: Erstellen von MPEG-7-Dokumenten für Audio-Dokumente, die auf niedrige Audio-Eigenschaften (Binär- und Quellveröffentlichung, Java, GPL) beschreiben.
  • MPEG-7 visuelle Deskriptorextraktion: Software zum Extrahieren von MPEG-7-visuellen Deskriptoren aus Bildern und Bildregionen.
  • XM Feature Extraction Web Service: Die Funktionen des Experimentationsmodells (XM) werden über Web-Service-Schnittstelle zur Verfügung gestellt, um die automatische visuelle Beschreibung der MPEG-7-visuellen Beschreibung von Bildern zu ermöglichen.
  • Tu Berlin MPEG-7 Audio Analyzer (Web-Demo): Erstellen von MPEG-7-Dokumenten (XML) für Audio-Dokumente (WAV, MP3). Alle 17 MPEG-7-Audiodeskriptoren mit niedrigem Niveau werden implementiert (kommerziell)
  • Tu Berlin MPEG-7 gesprochener Inhaltsdemonstrator (Web-Demo): Erstellen von MPEG-7-Dokumenten (XML) mit Spokencontent-Beschreibung aus einem Eingangssprachsignal (WAV, MP3) (kommerziell)
  • MP7JRS C ++ Bibliothek Komplette MPEG-7-Implementierung von Teil 3, 4 und 5 (visuell, audio und mds) nach Joanneum Research Institut für Informations- und Kommunikationstechnologien - Audiovisuelle Mediengruppe.
  • Bilvideo-7: MPEG-7-kompatibel, verteiltes Video-Indexierungs- und -abrufsystem, unterstützende komplexe, multimodale, zusammengesetzte Abfragen; entwickelt von der Bilkent University Multimedia Database Group (Bilmdg).
  • Unisay: Analyse der anspruchsvollen Postproduktionsdatei und Audioverarbeitung basierend auf MPEG-7.

Siehe auch

Einschränkungen

Der MPEG-7-Standard wurde ursprünglich in geschrieben XML -Schema (Xsd), was ausmacht Halbstrukturierte Daten. Zum Beispiel die Laufzeit eines Films, der mit MPEG-7 in kommentiert ist Xml ist maschinenlesbare DatenSo werden Software-Agenten wissen, dass die Zahl, die die Laufzeit zum Ausdruck bringt Semantik (Bedeutung), bekannt als das "Semantische Lücke. "Um dieses Problem anzugehen, gab es viele Versuche, den MPEG-7 abzubilden XML -Schema zum Web -Ontologie -Sprache (Eule), was a ist Strukturierte Daten Äquivalent zu den Begriffen des MPEG-7-Standards (MPEG-7ontos, Comm, Swinto usw.). Diese Zuordnungen haben jedoch nicht wirklich überbrückt "Semantische Lücke," Weil Videofunktionen mit niedriger Ebene allein sind unzureichend für die Darstellung der Videosemantik.[10] Mit anderen Worten, eine automatisch extrahierte Videofunktion wie die Farbverteilung bietet nicht die Bedeutung des tatsächlichen visuellen Inhalts.[11]

Vergleichen

  • Materialaustauschformat (MXF), ein Containerformat für professionelle digitale Video- und Audiomedien, die von definiert wurden Smpt.

Verweise

  • B.S. Manjunath (Herausgeber), Philippe Salembier (Herausgeber) und Thomas Sikora (Herausgeber): Einführung in MPEG-7: Multimedia-Inhaltsbeschreibung Schnittstelle. Wiley & Sons, April 2002 - ISBN0-471-48678-7
  • Harald Kosch: Distributed Multimedia-Datenbanktechnologien, unterstützt von MPEG-7 und MPEG-21. CRC Press, Januar 2004 - ISBN0-8493-1854-8
  • Giorgos Stamou (Editor) und Stefanos Kollias (Editor): Multimedia -Inhalte und das semantische Web: Standards, Methoden und Tools. Wiley & Sons, Mai 2005 - ISBN0-470-85753-6
  • Hyoung-Gook Kim, Nicolas Moreau und Thomas Sikora: MPEG-7-Audio und darüber hinaus: Audio-Inhalt-Indexierung und -Ar-Abruf. Wiley & Sons, Oktober 2005 - ISBN0-470-09334-x
  1. ^ ISO. "ISO/IEC 15938-1: 2002 - Informationstechnologie - Multimedia -Inhaltsbeschreibung Schnittstelle - Teil 1: Systeme". Abgerufen 2009-10-31.
  2. ^ MPEG. "Über MPEG - Erfolge". Chiariglione.org. Archiviert von das Original am 8. Juli 2008. Abgerufen 2009-10-31.
  3. ^ MPEG. "Begriffe der Referenz". Chiariglione.org. Archiviert von das Original am 21. Februar 2010. Abgerufen 2009-10-31.
  4. ^ a b MPEG. "MPEG -Standards - Vollständige Liste der entwickelten oder in der Entwicklung entwickelten Standards". Chiariglione.org. Archiviert von das Original am 20. April 2010. Abgerufen 2009-10-31.
  5. ^ Netzwerkdetselung. "Komplettes Protokollwörterbuch, Glossar und Referenz - M". Archiviert von das Original Am 2010-01-01. Abgerufen 2009-12-26.
  6. ^ ISO/IEC JTC 1/SC 29 (2009-10-30). "MPEG-7 (Multimedia-Inhaltsbeschreibung Schnittstelle)". Archiviert von das Original Am 2013-12-31. Abgerufen 2009-11-10.
  7. ^ ISO/IEC JTC1/SC29/WG11 (Oktober 2004). "MPEG-7-Übersicht (Version 10)". Chiariglione.org. Abgerufen 2009-11-01.
  8. ^ "MPEG-7 Ontology". Abgerufen 29. Juni 2017.
  9. ^ Lux, Mathias. "Kalif & Emir: MPEG-7-Fotoanschlag und Abruf." Proceedings der 17. ACM International Conference on Multimedia. ACM, 2009.
  10. ^ Sikos, Leslie F.; Powers, David M. W. (2015). "Wissensgetriebenes Videoinformationsabruf mit LOD". Verfahren des achten Workshops zur Ausbeutung semantischer Anmerkungen beim Abrufen von Informationen. S. 35–37. doi:10.1145/2810133.2810141. ISBN 9781450337908. S2CID 16544890.
  11. ^ Boll, Susanne; Klas, Wolfgang; Sheth, Amit (1998). "Überblick über die Verwendung von Metadaten zum Verwalten von Multimedia -Daten". Verwenden von Metadaten zum Integrieren und Anwenden digitaler Medien. McGraw-Hill. p.3. ISBN 978-0070577350.

Externe Links