STON

Actief project?
Project afgelopen
Project foto of beeld
STON
Korte beschrijving

Automatisch ondertitelen aan hand van spraak- en taaltechnologie

STON was een innovatief aanbestedingsproject dat via spraak- en taaltechnologie de ondertitelingsworkflow gedeeltelijk probeert te automatiseren. Daarin onderzochten we verschillende technologische componenten: 

  • spraakdetectie: wanneer wordt er gesproken? 
  • sprekerclustering: wie spreekt wanneer? 
  • taaldetectie: welke taal wordt er gesproken? 
  • een spraakherkenner: wat wordt er gezegd? 
  • een synchronisatiemodule voor de alignering van het script op de video
  • postprocessing om de ondertitels volgens de VRT-standaard te stijlen

Er werd ook een cockpit ontwikkeld om alle componenten aan te sturen, de configuratie af te stemmen op de noden van elk programmaformat en de resultaten te kunnen verifiëren.

De focus lag op het automatisch ondertitelen van documentaires en online nieuwscontent. De projectresultaten werden ook gedeeld for andere toepassingen, zoals het automatisch annoteren van content.

Partners
Limecraft, Devoteam, Pervoice, Elis-uGent, Esat-KULeuven
Startdatum
Einddatum