Improving text generation through introducing coherence metrics
Text-based interaction using mobile devices is now ubiquitous, its main outlets being social networks, messengers, email conversations, virtual assistants, accessibility applications, etc. Its status implies the need to facilitate text input by the user and to devise ways to provide verbal feedback....
Gespeichert in:
| Veröffentlicht in: | Кибернетика и системный анализ |
|---|---|
| Datum: | 2020 |
| Hauptverfasser: | , , , , |
| Format: | Artikel |
| Sprache: | Englisch |
| Veröffentlicht: |
Інститут кібернетики ім. В.М. Глушкова НАН України
2020
|
| Schlagworte: | |
| Online Zugang: | https://nasplib.isofts.kiev.ua/handle/123456789/190337 |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
| Назва журналу: | Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| Zitieren: | Improving text generation through introducing coherence metrics / O.O. Marchenko, O.S. Radyvonenko, T.S. Ignatova, P.V. Titarchuk, D.V. Zhelezniakov // Кибернетика и системный анализ. — 2020. — Т. 56, № 1. — С. 16–25. — Бібліогр.: 22 назв. — англ. |
Institution
Digital Library of Periodicals of National Academy of Sciences of Ukraine| _version_ | 1862710013845307392 |
|---|---|
| author | Marchenko, O.O. Radyvonenko, O.S. Ignatova, T.S. Titarchuk, P.V. Zhelezniakov, D.V. |
| author_facet | Marchenko, O.O. Radyvonenko, O.S. Ignatova, T.S. Titarchuk, P.V. Zhelezniakov, D.V. |
| citation_txt | Improving text generation through introducing coherence metrics / O.O. Marchenko, O.S. Radyvonenko, T.S. Ignatova, P.V. Titarchuk, D.V. Zhelezniakov // Кибернетика и системный анализ. — 2020. — Т. 56, № 1. — С. 16–25. — Бібліогр.: 22 назв. — англ. |
| collection | DSpace DC |
| container_title | Кибернетика и системный анализ |
| description | Text-based interaction using mobile devices is now ubiquitous, its main outlets being social networks, messengers, email conversations, virtual assistants, accessibility applications, etc. Its status implies the need to facilitate text input by the user and to devise ways to provide verbal feedback. In this paper, we discuss a method of unique text generation for mobile devices and its evaluation methodology as a solution for both stated challenges. We consider the opportunities given by the use of context (location, weather, scheduled events, etc.), the limitations in terms of computational resources and data usage, and the inherent subjectivity of creative task assessment given the number variety of possibly acceptable outputs. The comparison with other text generation approaches shows that the use of coherence metrics helps to achieve higher quality in terms of human perception. The Spearman correlation between the values of the proposed coherence metric and the human assessment of text readability is 0.86, which indicates the high quality of the metrics and the effectiveness of the method as a whole.
Взаємодія, що ґрунтується на тексті з використанням мобільних пристроїв, стала повсюдною, її основними джерелами є соціальні мережі, месенджери, електронні листи, віртуальні помічники, застосунки для забезпечення доступності тощо. Це передбачає потребу у створенні систем полегшення введення тексту користувачем та розробленні способів підтримки вербального зворотного зв’язку. Описано метод генерації унікального тексту для мобільних пристроїв та методологію його оцінювання як розв’язки обох зазначених вище задач. Розглянуто можливості, надані використанням контексту (місцезнаходження, погода, заплановані події тощо), обмеження обчислювальних ресурсів та використання даних, а також притаманну суб’єктивність оцінювання творчої задачі з урахуванням різноманіття можливих прийнятних результатів. Порівняння з іншими методами генерації текстів свідчить про те, що використання метрик зв’язності дає змогу досягти більш високого рівня якості з погляду сприйняття людиною. Кореляція Спірмена між значеннями пропонованої метрики та оцінкою читабельності тексту людиною становить 0.86, що свідчить про високу якість метрики та ефективність методу в цілому.
Взаимодействие на основе текста с использованием мобильных устройств стало повсеместным, его основными источниками являются социальные сети, мессенджеры, электронные письма, виртуальные помощники, приложения для обеспечения доступности и т.д. Это подразумевает необходимость создания систем облегчения ввода текста пользователем и разработки способов поддержки вербальной обратной связи. В этой статье мы обсуждаем метод генерации уникального текста для мобильных устройств и методологию его оценки в качестве решения обеих заявленных проблем. Мы рассматриваем возможности, предоставляемые использованием контекста (местоположение, погода, запланированные события и т.д.), ограничения вычислительных ресурсов и использования данных, а также присущую субъективность оценки творческой задачи с учетом разнообразия возможных приемлемых результатов. Сравнение с другими методами генерации текстов показывает, что использование метрик связности помогает достичь более высокого качества с точки зрения человеческого восприятия. Корреляция Спирмена между значениями предлагаемой метрики связности и человеческой оценкой читабельности текста составляет 0.86, что свидетельствует о высоком качестве метрики и эффективности метода в целом.
|
| first_indexed | 2025-12-07T17:21:44Z |
| format | Article |
| fulltext | |
| id | nasplib_isofts_kiev_ua-123456789-190337 |
| institution | Digital Library of Periodicals of National Academy of Sciences of Ukraine |
| issn | 1019-5262 |
| language | English |
| last_indexed | 2025-12-07T17:21:44Z |
| publishDate | 2020 |
| publisher | Інститут кібернетики ім. В.М. Глушкова НАН України |
| record_format | dspace |
| spelling | Marchenko, O.O. Radyvonenko, O.S. Ignatova, T.S. Titarchuk, P.V. Zhelezniakov, D.V. 2023-05-31T12:46:32Z 2023-05-31T12:46:32Z 2020 Improving text generation through introducing coherence metrics / O.O. Marchenko, O.S. Radyvonenko, T.S. Ignatova, P.V. Titarchuk, D.V. Zhelezniakov // Кибернетика и системный анализ. — 2020. — Т. 56, № 1. — С. 16–25. — Бібліогр.: 22 назв. — англ. 1019-5262 https://nasplib.isofts.kiev.ua/handle/123456789/190337 681.3 Text-based interaction using mobile devices is now ubiquitous, its main outlets being social networks, messengers, email conversations, virtual assistants, accessibility applications, etc. Its status implies the need to facilitate text input by the user and to devise ways to provide verbal feedback. In this paper, we discuss a method of unique text generation for mobile devices and its evaluation methodology as a solution for both stated challenges. We consider the opportunities given by the use of context (location, weather, scheduled events, etc.), the limitations in terms of computational resources and data usage, and the inherent subjectivity of creative task assessment given the number variety of possibly acceptable outputs. The comparison with other text generation approaches shows that the use of coherence metrics helps to achieve higher quality in terms of human perception. The Spearman correlation between the values of the proposed coherence metric and the human assessment of text readability is 0.86, which indicates the high quality of the metrics and the effectiveness of the method as a whole. Взаємодія, що ґрунтується на тексті з використанням мобільних пристроїв, стала повсюдною, її основними джерелами є соціальні мережі, месенджери, електронні листи, віртуальні помічники, застосунки для забезпечення доступності тощо. Це передбачає потребу у створенні систем полегшення введення тексту користувачем та розробленні способів підтримки вербального зворотного зв’язку. Описано метод генерації унікального тексту для мобільних пристроїв та методологію його оцінювання як розв’язки обох зазначених вище задач. Розглянуто можливості, надані використанням контексту (місцезнаходження, погода, заплановані події тощо), обмеження обчислювальних ресурсів та використання даних, а також притаманну суб’єктивність оцінювання творчої задачі з урахуванням різноманіття можливих прийнятних результатів. Порівняння з іншими методами генерації текстів свідчить про те, що використання метрик зв’язності дає змогу досягти більш високого рівня якості з погляду сприйняття людиною. Кореляція Спірмена між значеннями пропонованої метрики та оцінкою читабельності тексту людиною становить 0.86, що свідчить про високу якість метрики та ефективність методу в цілому. Взаимодействие на основе текста с использованием мобильных устройств стало повсеместным, его основными источниками являются социальные сети, мессенджеры, электронные письма, виртуальные помощники, приложения для обеспечения доступности и т.д. Это подразумевает необходимость создания систем облегчения ввода текста пользователем и разработки способов поддержки вербальной обратной связи. В этой статье мы обсуждаем метод генерации уникального текста для мобильных устройств и методологию его оценки в качестве решения обеих заявленных проблем. Мы рассматриваем возможности, предоставляемые использованием контекста (местоположение, погода, запланированные события и т.д.), ограничения вычислительных ресурсов и использования данных, а также присущую субъективность оценки творческой задачи с учетом разнообразия возможных приемлемых результатов. Сравнение с другими методами генерации текстов показывает, что использование метрик связности помогает достичь более высокого качества с точки зрения человеческого восприятия. Корреляция Спирмена между значениями предлагаемой метрики связности и человеческой оценкой читабельности текста составляет 0.86, что свидетельствует о высоком качестве метрики и эффективности метода в целом. en Інститут кібернетики ім. В.М. Глушкова НАН України Кибернетика и системный анализ Кібернетика Improving text generation through introducing coherence metrics Покращення якості генерування тексту за допомогою міри зв’язності Улучшение качества генерации текста с помощью меры связности Article published earlier |
| spellingShingle | Improving text generation through introducing coherence metrics Marchenko, O.O. Radyvonenko, O.S. Ignatova, T.S. Titarchuk, P.V. Zhelezniakov, D.V. Кібернетика |
| title | Improving text generation through introducing coherence metrics |
| title_alt | Покращення якості генерування тексту за допомогою міри зв’язності Улучшение качества генерации текста с помощью меры связности |
| title_full | Improving text generation through introducing coherence metrics |
| title_fullStr | Improving text generation through introducing coherence metrics |
| title_full_unstemmed | Improving text generation through introducing coherence metrics |
| title_short | Improving text generation through introducing coherence metrics |
| title_sort | improving text generation through introducing coherence metrics |
| topic | Кібернетика |
| topic_facet | Кібернетика |
| url | https://nasplib.isofts.kiev.ua/handle/123456789/190337 |
| work_keys_str_mv | AT marchenkooo improvingtextgenerationthroughintroducingcoherencemetrics AT radyvonenkoos improvingtextgenerationthroughintroducingcoherencemetrics AT ignatovats improvingtextgenerationthroughintroducingcoherencemetrics AT titarchukpv improvingtextgenerationthroughintroducingcoherencemetrics AT zhelezniakovdv improvingtextgenerationthroughintroducingcoherencemetrics AT marchenkooo pokraŝennââkostígeneruvannâtekstuzadopomogoûmírizvâzností AT radyvonenkoos pokraŝennââkostígeneruvannâtekstuzadopomogoûmírizvâzností AT ignatovats pokraŝennââkostígeneruvannâtekstuzadopomogoûmírizvâzností AT titarchukpv pokraŝennââkostígeneruvannâtekstuzadopomogoûmírizvâzností AT zhelezniakovdv pokraŝennââkostígeneruvannâtekstuzadopomogoûmírizvâzností AT marchenkooo ulučšeniekačestvageneraciitekstaspomoŝʹûmerysvâznosti AT radyvonenkoos ulučšeniekačestvageneraciitekstaspomoŝʹûmerysvâznosti AT ignatovats ulučšeniekačestvageneraciitekstaspomoŝʹûmerysvâznosti AT titarchukpv ulučšeniekačestvageneraciitekstaspomoŝʹûmerysvâznosti AT zhelezniakovdv ulučšeniekačestvageneraciitekstaspomoŝʹûmerysvâznosti |