D.A. Balan (Dragos)

Ik ben mijn promotieonderzoek gestart binnen het project Hoogwaardige Spraakherkenning voor al het Nederlands (HOSAN), gericht op het ontwikkelen van een Nederlands basismodel voor spraakherkenning dat de huidige stand van zaken verbetert voor alle soorten Nederlandse sprekers en spreekstijlen. Voor dit project is een consortium opgericht, bestaande uit partners van de Radboud Universiteit Nijmegen, Beeld & Geluid, SURF en de Politie. De eerste fase is gefinancierd tot 2025.

In het derde en vierde jaar van mijn promotieonderzoek werk ik aan het MediSpeech-project, dat zich richt op het ontwikkelen van een transcriptiepipeline voor gesprekken tussen patiënt en arts. Deze pipeline gebruikt de audio van het gesprek als input en genereert samenvattingen van de sessie in het formaat van het Electronic Healthcare Records (EHR). Dit is een internationaal project van drie jaar met partners uit vijf landen: Finland, Nederland, Portugal, Turkije en het Verenigd Koninkrijk. Op Nederlands niveau bestaat de samenwerking uit zowel industriële als academische partners, waaronder de Radboud Universiteit Nijmegen, TNO, HealthTalk en Amsterdam UMC. De focus ligt op de toepassing voor nefrologiepatiënten.

Ik ben begonnen als junior onderzoeker aan de Universiteit Twente, in samenwerking met het Nederlands Instituut voor Beeld & Geluid, aan het project Oral History - Stories at the Museum around Artworks (OH-SMArt). OH-SMArt was een langlopend initiatief om de digitale onderzoeksketen rondom het gebruik van mondelinge geschiedenis en gesproken verhalen aanzienlijk te verbeteren, met onderzoek naar kunstwerken en musea als casus. Mijn rol binnen dit project was het evalueren van state-of-the-art spraakherkenningsmodellen, zoals Whisper en XLS-R, en het implementeren van het best presterende model (Whisper large-v2) als automatische transcriptie binnen de infrastructuur van het Instituut. Dit model kan door onderzoekers die met digitale media-archieven werken, worden gebruikt om interviews met mondelinge geschiedenis of andere audiovisuele content uit het digitale archief van het Instituut automatisch te transcriberen.

Mijn achtergrond ligt in de informatica (bachelordiploma van de TU Delft) en spraaktechnologie (masterdiploma van de Universiteit Groningen - Campus Fryslân). Mijn algemene interesses liggen op het gebied van spraaktechnologie, met name spraakherkenning in contexten met beperkte middelen (talen, groepen sprekers, domeinspecifieke terminologie, en zo).

Expertises

• Computer Science

  • Speech Recognition
  • Research Infrastructure
  • Speech Recognition System
  • Benchmarking
  • Open Source
  • Voice Activity Detection
  • Infrastructure Provider
  • Telephone

Organisaties

Publicaties

Onderzoeksprofielen

Adres

Universiteit Twente

Citadel (gebouwnr. 09), kamer H234
Hallenweg 15
7522 NH Enschede

Navigeer naar locatie

Organisaties