Tiziana Armano
- Università di Torino
- https://www.unito.it/
14 giugno 2021 - SESSIONE 4: AI E PIATTAFORME PER LO SVILUPPO SOSTENIBILE
Riconoscimento vocale di formule
Speech recognition of formulas
Riconoscimento vocale di formule
Tecnico della ricerca presso il Dipartimento di Matematica “G. Peano” dell’Università degli Studi di Torino. Si occupa di e-elearning e tecnologie per la didattica. Ha fatto parte del gruppo di ricerca del progetto “Per una matematica accessibile e inclusiva” dal 2012 ed è membro del Laboratorio Polin. In questo ambito ha seguito in particolare lo sviluppo del pacchetto Axessibility e attualmente si occupa del progetto Matematica a voce.
Research technician at the Department of Mathematics “G. Peano "of the University of Turin. She deals with e-elearning and teaching technologies. She has been joining the project “For accessible and inclusive mathematics” since 2012 and she is a member of the Polin Laboratory. In this context she has been involved in various research projects including in particular the development of the Axessibility package and the Mathematics a voce project.
ABSTRACT
Le tecnologie, ed in particolare le tecnologie assistive e gli strumenti compensativi, hanno attualmente un livello di sviluppo elevato ma tuttavia presentano criticità nella gestione di contenuti scientifici (formule e grafici). Il Laboratorio per la Ricerca e la Sperimentazione di Nuove Tecnologie Assistive per le STEM "S. Polin" del Dipartimento di Matematica “G.Peano” (Università di Torino) si occupa di sviluppare nuove soluzioni tecnologiche e testare, adattare e diffondere le tecnologie già esistenti allo scopo di risolvere i problemi relativi all’accesso dei contenuti STEM. Recentemente, poiché gli attuali sistemi di trascrizione automatica e di interazione vocale non gestiscono efficacemente formule matematiche, il Laboratorio si occupa di ricerca e sviluppo nell’ambito del riconoscimento vocale di formule. Il progetto Matematica a voce nasce dall’esigenza di avere sistemi per la dettatura e la trascrizione di formule utili a persone con disabilità motorie (permanenti o temporanee), uditive e a persone con DSA. Il progetto prevede due moduli relativi a trascrizione e sottotitolazione di video di lezioni con formule e dettatura e gestione di formule in lingua italiana:
1. VoiceMath: sviluppo di software per la trascrizione in testo + LaTeX (per le formule) di lezioni universitarie STEM; in collaborazione con CELI S.R.L.
2. SpeechMatE: sviluppo di software per la dettatura e la modifica di formule matematiche con il riconoscimento della lingua italiana.
Technologies, in particular assistive technologies and compensatory tools, currently have a high level of development, nevertheless they present critical issues in the management of scientific contents (formulas and graphs). The Laboratory Research and Experimentation with Novel Assistive Technologies for STEM “S. Polin” (Department of Mathematics "G.Peano", University of Turin) is in charge of developing new software solutions and of testing, adapting and disseminating technologies to solve problems related to access STEM content. Since the current speech recognition and vocal interaction systems do not manage mathematical formulas accurately, the Laboratory researchers have been recently committed to the research and development concerning speech recognition of mathematical formulas. The Matematica a voce project deals with the challenge of producing accessible transcripts of STEM lessons and systems for dictating and transcribing formulas, useful for people with hearing, visually and motor impairments and with learning disabilities. The project includes two modules relating to transcription and subtitling of video lessons with formulas and to dictation and management of mathematical formulas in Italian:
1. VoiceMath: software development for speech-to-text transcription + LaTeX (for formulas) of STEM university lectures; in collaboration with CELI S.R.L.
2. SpeechMatE: application designed to type and edit maths through speech input in Italian language.
