Evaluating the efficiency of using ChatGPT and Google Services for scientific search
This research is devoted to comparison of ChatGPT and Google Search Engine in information retrieval efficiency, accuracy, and user experience. Through experiments and user studies, the study assesses their performance in various tasks, including question answering and dialogue interactions. Key metr...
Збережено в:
| Дата: | 2024 |
|---|---|
| Автори: | , , , |
| Формат: | Стаття |
| Мова: | English |
| Опубліковано: |
Інститут проблем реєстрації інформації НАН України
2024
|
| Теми: | |
| Онлайн доступ: | http://drsp.ipri.kiev.ua/article/view/316735 |
| Теги: |
Додати тег
Немає тегів, Будьте першим, хто поставить тег для цього запису!
|
| Назва журналу: | Data Recording, Storage & Processing |
Репозитарії
Data Recording, Storage & Processing| id |
drspiprikievua-article-316735 |
|---|---|
| record_format |
ojs |
| spelling |
drspiprikievua-article-3167352024-12-22T06:30:36Z Evaluating the efficiency of using ChatGPT and Google Services for scientific search Оцінка ефективності застосування сервісів «ChatGPT» та «Google» для наукового пошуку Манько, Д.Ю. Беляк , Є.В. Крючин , А.А. Євтушевська , О.В. large language model, metacognitive self-regulated learning, search engine, ChatGPT, Google services, response time, query comprehension велика мовна модель, метакогнітивне саморегульоване навчання, пошукова система, ChatGPT, сервіси Google, час затримки, аналіз запиту This research is devoted to comparison of ChatGPT and Google Search Engine in information retrieval efficiency, accuracy, and user experience. Through experiments and user studies, the study assesses their performance in various tasks, including question answering and dialogue interactions. Key metrics like response time, result relevance, query comprehension, and user satisfaction are compared, highlighting the strengths and weaknesses of each system. ChatGPT stands out in natural language understanding and personalized interactions, whereas Google Search Engine excels in quickly retrieving vast web information accurately. The findings offer insights into AI-driven conversational agents and traditional search engines, guiding the development of better information retrieval systems and enhancing online user experiences. Проведено порівняльний аналіз ефективності застосування онлайн-сервісу «ChatGPT», що базується на великій мовній моделі та механізмах адаптації для ведення діалогів природними мовами, а також пошукової системи «Google Search Engine». Цільовими показниками порівняльного аналізу слугували швидкодія, точність і користувацький досвід при пошуку інформації у рамках проведення наукового дослідження. На основі наборів даних, що представляють результати виконання зазначеними онлайн-сервісом і пошуковою системою серії запитів було досліджено продуктивність роботи в режимі діалогової взаємодії. За тестові завдання було обрано завдання аналізу азіатського ринку світлодіодів і сучасного стану досліджень технологій, що базуються на використанні джерел ближнього інфрачервоного випромінювання. Проведено порівняння за цільовими показниками, що представлені на кількісному рівні, зокрема, за часом обробки вхідного запиту, відповідністю результатів виконання поставленому запиту, а також індивідуальним досвідом користувачів. Це надало можливість виділити сильні та слабкі сторони онлайн-сервісу «ChatGPT» і пошукової системи «Google Search Engine», а також сформувати методологічні рекомендації щодо їхнього використання в науковому пошуку. Зазначено, що онлайн-сервіс «ChatGPT» ефективно виконує запити, які сформовано за принципами природної мови, як таку в рамках дослідження було обрано англійську. Індивідуальний досвід користувачів вказує на високий рівень персоналізованої взаємодії при роботі з «ChatGPT», що сприяє ефективності роботи при роботі над науковим проектом на етапах наукового пошуку, аналізу даних і підготовки результатів наукового дослідження. Було вказано на значні переваги у використанні механізму «ChatGPT 4.0» над «ChatGPT 3.5» за об’ємом, релевантністю та структурованістю відповіді. Натомість, пошукова система «Google Search Engine» характеризується високими показниками точності, актуальності та об’єму наукових даних, але робота із зазначеним онлайн-сервісом при цьому потребує від дослідника відповідної кваліфікації. Табл.: 4. Іл.: 3. Бібліогр.: 16 найм. Інститут проблем реєстрації інформації НАН України 2024-11-19 Article Article application/pdf http://drsp.ipri.kiev.ua/article/view/316735 10.35681/1560-9189.2024.26.2.316735 Data Recording, Storage & Processing; Vol. 26 No. 2 (2024); 33-43 Регистрация, хранение и обработка данных; Том 26 № 2 (2024); 33-43 Реєстрація, зберігання і обробка даних; Том 26 № 2 (2024); 33-43 1560-9189 en http://drsp.ipri.kiev.ua/article/view/316735/308965 Авторське право (c) 2024 Реєстрація, зберігання і обробка даних |
| institution |
Data Recording, Storage & Processing |
| baseUrl_str |
|
| datestamp_date |
2024-12-22T06:30:36Z |
| collection |
OJS |
| language |
English |
| topic |
large language model metacognitive self-regulated learning search engine ChatGPT Google services response time query comprehension |
| spellingShingle |
large language model metacognitive self-regulated learning search engine ChatGPT Google services response time query comprehension Манько, Д.Ю. Беляк , Є.В. Крючин , А.А. Євтушевська , О.В. Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| topic_facet |
large language model metacognitive self-regulated learning search engine ChatGPT Google services response time query comprehension велика мовна модель метакогнітивне саморегульоване навчання пошукова система ChatGPT сервіси Google час затримки аналіз запиту |
| format |
Article |
| author |
Манько, Д.Ю. Беляк , Є.В. Крючин , А.А. Євтушевська , О.В. |
| author_facet |
Манько, Д.Ю. Беляк , Є.В. Крючин , А.А. Євтушевська , О.В. |
| author_sort |
Манько, Д.Ю. |
| title |
Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| title_short |
Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| title_full |
Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| title_fullStr |
Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| title_full_unstemmed |
Evaluating the efficiency of using ChatGPT and Google Services for scientific search |
| title_sort |
evaluating the efficiency of using chatgpt and google services for scientific search |
| title_alt |
Оцінка ефективності застосування сервісів «ChatGPT» та «Google» для наукового пошуку |
| description |
This research is devoted to comparison of ChatGPT and Google Search Engine in information retrieval efficiency, accuracy, and user experience. Through experiments and user studies, the study assesses their performance in various tasks, including question answering and dialogue interactions. Key metrics like response time, result relevance, query comprehension, and user satisfaction are compared, highlighting the strengths and weaknesses of each system. ChatGPT stands out in natural language understanding and personalized interactions, whereas Google Search Engine excels in quickly retrieving vast web information accurately. The findings offer insights into AI-driven conversational agents and traditional search engines, guiding the development of better information retrieval systems and enhancing online user experiences. |
| publisher |
Інститут проблем реєстрації інформації НАН України |
| publishDate |
2024 |
| url |
http://drsp.ipri.kiev.ua/article/view/316735 |
| work_keys_str_mv |
AT manʹkodû evaluatingtheefficiencyofusingchatgptandgoogleservicesforscientificsearch AT belâkêv evaluatingtheefficiencyofusingchatgptandgoogleservicesforscientificsearch AT krûčinaa evaluatingtheefficiencyofusingchatgptandgoogleservicesforscientificsearch AT êvtuševsʹkaov evaluatingtheefficiencyofusingchatgptandgoogleservicesforscientificsearch AT manʹkodû ocínkaefektivnostízastosuvannâservísívchatgpttagoogledlânaukovogopošuku AT belâkêv ocínkaefektivnostízastosuvannâservísívchatgpttagoogledlânaukovogopošuku AT krûčinaa ocínkaefektivnostízastosuvannâservísívchatgpttagoogledlânaukovogopošuku AT êvtuševsʹkaov ocínkaefektivnostízastosuvannâservísívchatgpttagoogledlânaukovogopošuku |
| first_indexed |
2024-12-23T04:04:09Z |
| last_indexed |
2024-12-23T04:04:09Z |
| _version_ |
1820923757068288000 |