Multimedia Retrieval in MultiMatch: The Impact of Speech Transcript Errors on Search Behaviour

Contents:

  • 1 Introduction
  • 1.1 Searching Multilingual Multimedia: What the professional needs
  • 1.2 The Users’ demand: “More Multimodal Info with less Visual Components”
  • 1.3 Preliminary Implementation of a Phoneme Matching Algorithm

In het kader van het Europese onderzoeksproject MultiMatch zijn de prestaties van het prototype, een multimodaal zoeksysteem voor multimedia geëvalueerd met een gebruikersonderzoek. Dit artikel beschrijft de uitkomsten van dat onderzoek. De gebruikers bleken de voorkeur te geven aan een informatierijke, maar grafisch rustige interface. Verder bleken de gebruikers geneigd te zijn om een misplaatst vertrouwen te hebben in de accuraatheid van transcripts die automatisch bij het videomateriaal waren gegenereerd. Hierdoor waren de gebruikers niet geneigd om systematisch te controleren of de zoektermen wel voor kwamen in de transcripts van het zoekresultaat. Gewoonlijk, in zoeksystemen voor AV-materiaal zonder transcripts, luisteren de gebruikers wel naar de gevonden video items om de hits te controleren op relevantie. Om de gebruiker erop attent te maken dat een zoekterm ten onrechte gevonden kan zijn in een transcript, stellen de onderzoekers voor om een algoritme te gaan toepassen dat ook fonetisch op de zoektermen zoekt.

Interessant artikel vanwege de concrete uitkomsten van het evaluatieonderzoek naar met name de zoekfunctionaliteit op basis van automatische spraakherkenning. Gebruikers blijken, enigszins ten onrechte, erop te vertrouwen dat de transcripts accuraat zijn en dit is van invloed op hun zoekgedrag.