Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання
Проаналізовано основні методи оцінки когерентності текстів з використанням різних технологій машинного навчання. Детально описано принципи роботи методів з використанням рекурентної та згорткової нейронних мереж, розглянуто їх переваги та недоліки. Обґрунтовано доцільність використання методу графу...
Gespeichert in:
| Veröffentlicht in: | Проблеми програмування |
|---|---|
| Datum: | 2020 |
| Hauptverfasser: | , |
| Format: | Artikel |
| Sprache: | Ukrainisch |
| Veröffentlicht: |
Інститут програмних систем НАН України
2020
|
| Schlagworte: | |
| Online Zugang: | https://nasplib.isofts.kiev.ua/handle/123456789/180475 |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
| Назва журналу: | Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| Zitieren: | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання / А.А. Крамов, С.Д. Погорілий // Проблеми програмування. — 2020. — № 2-3. — С. 295-303. — Бібліогр.: 21 назв. — укр. |
Institution
Digital Library of Periodicals of National Academy of Sciences of Ukraine| _version_ | 1862590434933473280 |
|---|---|
| author | Крамов, А.А. Погорілий, С.Д. |
| author_facet | Крамов, А.А. Погорілий, С.Д. |
| citation_txt | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання / А.А. Крамов, С.Д. Погорілий // Проблеми програмування. — 2020. — № 2-3. — С. 295-303. — Бібліогр.: 21 назв. — укр. |
| collection | DSpace DC |
| container_title | Проблеми програмування |
| description | Проаналізовано основні методи оцінки когерентності текстів з використанням різних технологій машинного навчання. Детально описано принципи роботи методів з використанням рекурентної та згорткової нейронних мереж, розглянуто їх переваги та недоліки. Обґрунтовано доцільність використання методу графу семантичної схожості порівняно з іншими методами. Запропоновано використання інших підходів векторного представлення речень для розрахунку міри семантичної схожості елементів тексту. Проведено експериментальну перевірку проаналізованих методів на множині україномовних наукових статей, здійснено навчання моделей семантичного представлення слів та речень. Виконано навчання рекурентної та згорткової нейронних мереж з використанням методу раннього зупину. Обраховано точність вирішення задач розрізнення документів та вставки для проаналізованих методів, здійснено порівняльний аналіз отриманих результатів.
Проанализированы основные методы оценки когерентности текстов с использованием различных технологий машинного обучения. Детально описаны принципы работы методов с использованием рекуррентной и сверточной нейронных сетей, рассмотрены их преимущества и недостатки. Обосновано целесообразность использования метода графа семантического сходства в сравнении с другими методами. Предложено использование других подходов векторного представления предложений для расчета меры семантического сходства элементов текста. Проведена экспериментальная проверка методов на множества украиноязычных научных статей, осуществлено обучение моделей семантического представления слов и предложений. Исполнено обучение рекуррентной и сверточной нейронных сетей с использованием метода ранней остановки. Посчитана точность решения задач различения документов и вставки для методов, осуществлен сравнительный анализ полученных результатов.
The main methods of coherence evaluation of texts with the usage of different machine learning techniques have been analyzed. The principles of methods with the usage of recurrent and convolutional neural networks have been described in details. The advantages of a semantic similarity graph method have been considered. Other approaches to perform the vector representation of sentences for the estimation of semantic similarity between the elements of a text have been suggested to use. The experimental examination of methods has been performed on the set of Ukrainian scientific articles. The training of recurrent and convolutional networks with the usage of early stopping has been performed. The accuracy of the solving of document discrimination and insertion tasks has been calculated. The comparative analysis of the results obtained has been performed.
|
| first_indexed | 2025-11-27T04:52:07Z |
| format | Article |
| fulltext | |
| id | nasplib_isofts_kiev_ua-123456789-180475 |
| institution | Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| issn | 1727-4907 |
| language | Ukrainian |
| last_indexed | 2025-11-27T04:52:07Z |
| publishDate | 2020 |
| publisher | Інститут програмних систем НАН України |
| record_format | dspace |
| spelling | Крамов, А.А. Погорілий, С.Д. 2021-09-29T18:15:05Z 2021-09-29T18:15:05Z 2020 Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання / А.А. Крамов, С.Д. Погорілий // Проблеми програмування. — 2020. — № 2-3. — С. 295-303. — Бібліогр.: 21 назв. — укр. 1727-4907 DOI: https://doi.org/10.15407/pp2020.02-03.295 https://nasplib.isofts.kiev.ua/handle/123456789/180475 004.83 Проаналізовано основні методи оцінки когерентності текстів з використанням різних технологій машинного навчання. Детально описано принципи роботи методів з використанням рекурентної та згорткової нейронних мереж, розглянуто їх переваги та недоліки. Обґрунтовано доцільність використання методу графу семантичної схожості порівняно з іншими методами. Запропоновано використання інших підходів векторного представлення речень для розрахунку міри семантичної схожості елементів тексту. Проведено експериментальну перевірку проаналізованих методів на множині україномовних наукових статей, здійснено навчання моделей семантичного представлення слів та речень. Виконано навчання рекурентної та згорткової нейронних мереж з використанням методу раннього зупину. Обраховано точність вирішення задач розрізнення документів та вставки для проаналізованих методів, здійснено порівняльний аналіз отриманих результатів. Проанализированы основные методы оценки когерентности текстов с использованием различных технологий машинного обучения. Детально описаны принципы работы методов с использованием рекуррентной и сверточной нейронных сетей, рассмотрены их преимущества и недостатки. Обосновано целесообразность использования метода графа семантического сходства в сравнении с другими методами. Предложено использование других подходов векторного представления предложений для расчета меры семантического сходства элементов текста. Проведена экспериментальная проверка методов на множества украиноязычных научных статей, осуществлено обучение моделей семантического представления слов и предложений. Исполнено обучение рекуррентной и сверточной нейронных сетей с использованием метода ранней остановки. Посчитана точность решения задач различения документов и вставки для методов, осуществлен сравнительный анализ полученных результатов. The main methods of coherence evaluation of texts with the usage of different machine learning techniques have been analyzed. The principles of methods with the usage of recurrent and convolutional neural networks have been described in details. The advantages of a semantic similarity graph method have been considered. Other approaches to perform the vector representation of sentences for the estimation of semantic similarity between the elements of a text have been suggested to use. The experimental examination of methods has been performed on the set of Ukrainian scientific articles. The training of recurrent and convolutional networks with the usage of early stopping has been performed. The accuracy of the solving of document discrimination and insertion tasks has been calculated. The comparative analysis of the results obtained has been performed. uk Інститут програмних систем НАН України Проблеми програмування Методи машинного навчання Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання Автоматизированные методы оценки когерентности украиноязычных текстов с использованием методологии машинного обучения Automated methods of coherence evaluation of Ukrainian texts using machine learning techniques Article published earlier |
| spellingShingle | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання Крамов, А.А. Погорілий, С.Д. Методи машинного навчання |
| title | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| title_alt | Автоматизированные методы оценки когерентности украиноязычных текстов с использованием методологии машинного обучения Automated methods of coherence evaluation of Ukrainian texts using machine learning techniques |
| title_full | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| title_fullStr | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| title_full_unstemmed | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| title_short | Автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| title_sort | автоматизовані методи оцінки когерентності україномовних текстів з використанням методології машинного навчання |
| topic | Методи машинного навчання |
| topic_facet | Методи машинного навчання |
| url | https://nasplib.isofts.kiev.ua/handle/123456789/180475 |
| work_keys_str_mv | AT kramovaa avtomatizovanímetodiocínkikogerentnostíukraínomovnihtekstívzvikoristannâmmetodologíímašinnogonavčannâ AT pogoríliisd avtomatizovanímetodiocínkikogerentnostíukraínomovnihtekstívzvikoristannâmmetodologíímašinnogonavčannâ AT kramovaa avtomatizirovannyemetodyocenkikogerentnostiukrainoâzyčnyhtekstovsispolʹzovaniemmetodologiimašinnogoobučeniâ AT pogoríliisd avtomatizirovannyemetodyocenkikogerentnostiukrainoâzyčnyhtekstovsispolʹzovaniemmetodologiimašinnogoobučeniâ AT kramovaa automatedmethodsofcoherenceevaluationofukrainiantextsusingmachinelearningtechniques AT pogoríliisd automatedmethodsofcoherenceevaluationofukrainiantextsusingmachinelearningtechniques |