MedElevator Войти в исследования
← Поиск публикаций

DOI 10.21437/interspeech.2024-2236

Медицинская библиотека · Interspeech · 2024

Contrastive Learning Approach for Assessment of Phonological Precision in Patients with Tongue Cancer Using MRI Data.

Arias-Vergara Tomás, Pérez-Toro Paula Andrea, Liu Xiaofeng, Xing Fangxu, Stone Maureen, Zhuo Jiachen, Prince Jerry L, Schuster Maria, Nöth Elmar, Woo Jonghye, Maier Andreas

СтатьяПеревод пока не подготовлен

Аннотация

Magnetic Resonance Imaging (MRI) allows analyzing speech production by capturing high-resolution images of the dynamic processes in the vocal tract. In clinical applications, combining MRI with synchronized speech recordings leads to improved patient outcomes, especially if a phonological-based approach is used for assessment. However, when audio signals are unavailable, the recognition accuracy of sounds is decreased when using only MRI data. We propose a contrastive learning approach to improve the detection of phonological classes from MRI data when acoustic signals are not available at inference time. We demonstrate that frame-wise recognition of phonological classes improves from an f1 of 0.74 to 0.85 when the contrastive loss approach is implemented. Furthermore, we show the utility of our approach in the clinical application of using such phonological classes to assess speech disorders in patients with tongue cancer, yielding promising results in the recognition task.

Для цитирования: Arias-Vergara Tomás, Pérez-Toro Paula Andrea, Liu Xiaofeng, Xing Fangxu, Stone Maureen, Zhuo Jiachen, Prince Jerry L, Schuster Maria, Nöth Elmar, Woo Jonghye, Maier Andreas. Contrastive Learning Approach for Assessment of Phonological Precision in Patients with Tongue Cancer Using MRI Data.. Interspeech. 2024. DOI: 10.21437/interspeech.2024-2236.
Подготовка и перевод публикации
Обработка статьи · этапы, ошибки и управление
Загрузка состояния…

История · было → стало

Состояние обновляется каждые 5 секунд, пока блок открыт. Процент показывается только там, где известен объём работы. Пауза останавливает продолжение этапа; текущий запрос к источнику может завершиться.

Тип публикации указан по данным источника. Уровень доказательности автоматически не присваивается.