MariaFrancesca Guadalupi
- CELI s.r.l.
- https://www.celi.it/
14 giugno 2021 - SESSIONE 4: AI E PIATTAFORME PER LO SVILUPPO SOSTENIBILE
Riconoscimento vocale di formule
Speech recognition of formulas
Riconoscimento vocale di formule
- text mining su sondaggi di valutazione. L'attività è stata svolta con il software Sophia Analytics (proprietario Celi s.r.l.).
- social listening and brand reputation. Ho sviluppato grammatiche per l'estrazione di opinioni e definire un
dominio semantico specifico con l'obiettivo di identificare il sentiment positivo, negativo o misto nei commenti web in relazione a prodotti, servizi o esperienze dei clienti.
- “RiMotivAzione”, finanziato dalla Fondazione Europea POR FESR Piemonte 2014-2020 con l'obiettivo di potenziare il percorso riabilitativo per i pazienti con disabilità motoria degli arti superiori dovuto a ictus,
utilizzando diverse tecnologie e strumenti disponibili in un'unica piattaforma.
- realizzazione del software Sophia Chatbot (proprietario Celi s.r.l.) per lo sviluppo di interfacce
conversazionali (chatbot).
- partecipazione al progetto di text-to-speech Text-o-Phone (proprietario Celi s.r.l.).
- text mining of evaluation surveys. The activity has been performed with the software Sophia Analytics (developed by Celi s.r.l.).
- social listening and brand reputation. Within the project, I developed grammar policies for opinion mining and specific semantic domain with the objective of identifying the postive, negative or mixed sentiment of web users in relation to products, services or experiences provided by the Client.
- applied research project “RiMotivAzione”, financed by European Found POR FESR Piemonte 2014-2020. The aim was to enhance the rehabilitation process for patients with motor disabilities to upper limb due to a stroke, using different technologies and tools available in a single platform.
- realization of the software Sophia Chatbot (developed by Celi s.r.l.) for the development of conversational interfaces.
- realization of the text-to-speech software Text-o-Phone (developed by Celi s.r.l.).
ABSTRACT
Le tecnologie, ed in particolare le tecnologie assistive e gli strumenti compensativi, hanno attualmente un livello di sviluppo elevato ma tuttavia presentano criticità nella gestione di contenuti scientifici (formule e grafici). Il Laboratorio per la Ricerca e la Sperimentazione di Nuove Tecnologie Assistive per le STEM "S. Polin" del Dipartimento di Matematica “G.Peano” (Università di Torino) si occupa di sviluppare nuove soluzioni tecnologiche e testare, adattare e diffondere le tecnologie già esistenti allo scopo di risolvere i problemi relativi all’accesso dei contenuti STEM. Recentemente, poiché gli attuali sistemi di trascrizione automatica e di interazione vocale non gestiscono efficacemente formule matematiche, il Laboratorio si occupa di ricerca e sviluppo nell’ambito del riconoscimento vocale di formule. Il progetto Matematica a voce nasce dall’esigenza di avere sistemi per la dettatura e la trascrizione di formule utili a persone con disabilità motorie (permanenti o temporanee), uditive e a persone con DSA. Il progetto prevede due moduli relativi a trascrizione e sottotitolazione di video di lezioni con formule e dettatura e gestione di formule in lingua italiana:
1. VoiceMath: sviluppo di software per la trascrizione in testo + LaTeX (per le formule) di lezioni universitarie STEM; in collaborazione con CELI S.R.L.
2. SpeechMatE: sviluppo di software per la dettatura e la modifica di formule matematiche con il riconoscimento della lingua italiana.
Technologies, in particular assistive technologies and compensatory tools, currently have a high level of development, nevertheless they present critical issues in the management of scientific contents (formulas and graphs). The Laboratory Research and Experimentation with Novel Assistive Technologies for STEM “S. Polin” (Department of Mathematics "G.Peano", University of Turin) is in charge of developing new software solutions and of testing, adapting and disseminating technologies to solve problems related to access STEM content. Since the current speech recognition and vocal interaction systems do not manage mathematical formulas accurately, the Laboratory researchers have been recently committed to the research and development concerning speech recognition of mathematical formulas. The Matematica a voce project deals with the challenge of producing accessible transcripts of STEM lessons and systems for dictating and transcribing formulas, useful for people with hearing, visually and motor impairments and with learning disabilities. The project includes two modules relating to transcription and subtitling of video lessons with formulas and to dictation and management of mathematical formulas in Italian:
1. VoiceMath: software development for speech-to-text transcription + LaTeX (for formulas) of STEM university lectures; in collaboration with CELI S.R.L.
2. SpeechMatE: application designed to type and edit maths through speech input in Italian language.
