Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing
A set of speech recognition techniques that allow for Ukrainian broadcast monitoring are covered: speech-to-text conversion; speaker diarization and recognition; text perception enhancement; multilingual aspects. The experimental results are presented and discussed.
Збережено в:
| Дата: | 2019 |
|---|---|
| Автори: | , , , , |
| Формат: | Стаття |
| Мова: | English |
| Опубліковано: |
Міжнародний науково-навчальний центр інформаційних технологій і систем НАН та МОН України
2019
|
| Назва видання: | Control systems & computers |
| Теми: | |
| Онлайн доступ: | http://dspace.nbuv.gov.ua/handle/123456789/181099 |
| Теги: |
Додати тег
Немає тегів, Будьте першим, хто поставить тег для цього запису!
|
| Назва журналу: | Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| Цитувати: | Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing / M.M., Sazhok R.A. Seliukh, D.Ya. Fedoryn, O.A. Yukhymenko, V.V. Robeiko // Control systems & computers. — 2019. — № 6. — С. 46-57. — Бібліогр.: 16 назв. — англ. |
Репозиторії
Digital Library of Periodicals of National Academy of Sciences of Ukraine| id |
irk-123456789-181099 |
|---|---|
| record_format |
dspace |
| spelling |
irk-123456789-1810992021-11-01T01:26:51Z Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing Sazhok, M.M. Seliukh, R.A. Fedoryn, D.Ya. Yukhymenko, O.A. Robeiko, V.V. Intellectual Informational Technologies and Systems A set of speech recognition techniques that allow for Ukrainian broadcast monitoring are covered: speech-to-text conversion; speaker diarization and recognition; text perception enhancement; multilingual aspects. The experimental results are presented and discussed. Методи. При автоматичному перетворенні на текст застосовується метод, основні складові якого засновані на підходах генеративної моделі (НММ), апроксимації областей спостереження сигналу з використанням сумішей нормального закону (GMM) та покращення якості цієї апроксимації засобами глибокого навчання (DNN). Для моделювання акустичних особливостей людини застосовується підхід i-vector, що також дає змогу визначати моменти зміни мовця. Скінченні автомати та рекурентні нейромережі застосовано для поліпшення сприйняття тексту людиною та для подальшого його автоматичного оброблення. Злиття моделей двох мов дало змогу ефективно обробляти спонтанне перемикання з однієї мови на іншу. Результати та висновки. Реалізована схема перетворення мовлення на текст дала змогу отримати результат розпізнавання фонограм телерадіомовлення у формі, зручній і для користувача-людини, і для подальшої автоматичної обробки. А саме, за отриманим текстом зрозуміло, про що йдеться, відстежується фактичний матеріал (власні назви, числа, дати тощо), розділові знаки полегшують сприйняття тексту, і загалом зменшуються затрати на ручне редагування для отримання кінцевої стенограми. Методы. При автоматическом преобразовании в текст применяется метод, основные составляющие которого основаны на подходах генеративной модели (НММ), аппроксимации областей наблюдения сигнала с использованием смесей нормального закона (GMM) и улучшения качества этой аппроксимации средствами глубокого обучения (DNN). Для моделирования акустических особенностей человека применяется подход i-vector, что также позволяет определять моменты смены говорящего. Конечные автоматы и рекуррентные нейросети примененеы для улучшения восприятия текста человеком и для дальнейшей его автоматической обработки. Слияние моделей двух языков позволило эффективно обрабатывать спонтанное переключение с одного языка на другой. Результаты и выводы. Реализованная схема преобразования речи в текст дала возможность получить результат распознавания фонограмм телерадиообщения в удобном виде, как для пользователя-человека, так и для дальнейшей автоматической обработки. А именно: по полученному тексту понятно, о чем идет речь, отслеживается фактический материал (собственные названия, числа, даты и т.д.), разделительные знаки облегчают восприятие текста, и вообще уменьшаются затраты на ручное редактирование для получения конечной стенограммы. 2019 Article Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing / M.M., Sazhok R.A. Seliukh, D.Ya. Fedoryn, O.A. Yukhymenko, V.V. Robeiko // Control systems & computers. — 2019. — № 6. — С. 46-57. — Бібліогр.: 16 назв. — англ. 2706-8145 DOI https://doi.org/10.15407/usim.2019.06.046 http://dspace.nbuv.gov.ua/handle/123456789/181099 004.934 en Control systems & computers Міжнародний науково-навчальний центр інформаційних технологій і систем НАН та МОН України |
| institution |
Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| collection |
DSpace DC |
| language |
English |
| topic |
Intellectual Informational Technologies and Systems Intellectual Informational Technologies and Systems |
| spellingShingle |
Intellectual Informational Technologies and Systems Intellectual Informational Technologies and Systems Sazhok, M.M. Seliukh, R.A. Fedoryn, D.Ya. Yukhymenko, O.A. Robeiko, V.V. Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing Control systems & computers |
| description |
A set of speech recognition techniques that allow for Ukrainian broadcast monitoring are covered: speech-to-text conversion; speaker diarization and recognition; text perception enhancement; multilingual aspects. The experimental results are presented and discussed. |
| format |
Article |
| author |
Sazhok, M.M. Seliukh, R.A. Fedoryn, D.Ya. Yukhymenko, O.A. Robeiko, V.V. |
| author_facet |
Sazhok, M.M. Seliukh, R.A. Fedoryn, D.Ya. Yukhymenko, O.A. Robeiko, V.V. |
| author_sort |
Sazhok, M.M. |
| title |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing |
| title_short |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing |
| title_full |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing |
| title_fullStr |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing |
| title_full_unstemmed |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing |
| title_sort |
automatic speech recognition for ukrainian broadcast media transcribing |
| publisher |
Міжнародний науково-навчальний центр інформаційних технологій і систем НАН та МОН України |
| publishDate |
2019 |
| topic_facet |
Intellectual Informational Technologies and Systems |
| url |
http://dspace.nbuv.gov.ua/handle/123456789/181099 |
| citation_txt |
Automatic Speech Recognition For Ukrainian Broadcast Media Transcribing / M.M., Sazhok R.A. Seliukh, D.Ya. Fedoryn, O.A. Yukhymenko, V.V. Robeiko // Control systems & computers. — 2019. — № 6. — С. 46-57. — Бібліогр.: 16 назв. — англ. |
| series |
Control systems & computers |
| work_keys_str_mv |
AT sazhokmm automaticspeechrecognitionforukrainianbroadcastmediatranscribing AT seliukhra automaticspeechrecognitionforukrainianbroadcastmediatranscribing AT fedoryndya automaticspeechrecognitionforukrainianbroadcastmediatranscribing AT yukhymenkooa automaticspeechrecognitionforukrainianbroadcastmediatranscribing AT robeikovv automaticspeechrecognitionforukrainianbroadcastmediatranscribing |
| first_indexed |
2023-10-18T22:51:38Z |
| last_indexed |
2023-10-18T22:51:38Z |
| _version_ |
1796156622007959552 |