Подготовка научной статьи: справится ли ChatGPT?
https://doi.org/10.31992/0869-3617-2023-32-8-9-24-47
Аннотация
Появление языковых сервисов искусственного интеллекта пробудило надежды, связанные с облегчением задач публикационной активности. Представители академического сообщества задались вопросом, смогут ли чат-боты оптимизировать процесс написания научных статей. Особое внимание вызвала языковая модель ChatGPT, способная, помимо прочего, генерировать тексты научной направленности. Случаи написания академических работ с помощью ChatGPT стали причиной появления целого ряда публикаций, анализирующих плюсы и минусы использования данной нейросети. В настоящей работе исследуется возможность использования ChatGPT для написания введения к научной статье по актуальной тематике управления Арктикой. Был создан ряд запросов к сети ChatGPT, основывающихся на логике общепринятого публикационного формата IMRAD. Для данного формата характерны структурно-функциональные элементы, которые послужили логическим основанием для запросов. Полученные от ChatGPT ответы были проанализированы на предмет их соответствия требованиям к научной статье, согласно публикационному формату IMRAD. Результат анализа показал, что ChatGPT не способен справиться c требованиями к публикациям научной статьи в современном научно-публикационном дискурсе.
Об авторе
И. М. Зашихина
Северный (Арктический) федеральный университет имени М.В. Ломоносова
Россия
Россия
канд. филос. наук, доцент кафедры философии и социологии Высшей школы социально-гуманитарных наук и международной коммуникации
163002, г. Архангельск, Набережная Сев. Двины, 17
Список литературы
1. Раицкая Л.К. Теоретическая и исследовательская статьи в социально-гуманитарных дисциплинах: как преодолеть трудности восприятия западной методологии в России // Научный редактор и издатель. 2018. Т. 3. № 1–2. С. 13–25. DOI: 10.24069/2542-02672018-1-2-13-25
2. Шейпак С.А. Опубликовать научную статью: диалог автора и журнала // Высшее образование в России. 2021. Т. 30. № 3. C. 151–167. DOI: 10.31992/0869-3617-2021-30-3-151-168
3. Ramos L., Marquez R., Rivas F. AI’s next frontier: The rise of ChatGPT and its implications on society, industry, and scientific research // Revista Ciencia e Ingeniería. 2023. Vol. 44. No. 2. P. 131–148. URL: http://erevistas.saber.ula.ve/index.php/cienciaeingenieria/article/view/18872 (дата обращения 02.07.23).
4. Haleem A., Javaid M., Singh R.P. An era of ChatGPT as a significant futuristic support tool: A study on features, abilities, and challenges // BenchCouncil Transactions on Benchmarks, Standards and Evaluations. 2022. Vol. 2. No. 4. DOI: 10.1016/j.tbench.2023.100089
5. Lund B., Ting W. Chatting about ChatGPT: How May AI and GPT Impact Academia and Libraries? // Library Hi Tech News. January 2023. DOI: 10.2139/ssrn.4333415
6. Aljanabi M., Yaseen M., Ali A., Abed S., Chatgpt. ChatGpt: Open Possibilities // Iraqi Journal for Computer Science and Mathematics. 2023. Vol. 4. No. 1. P. 62–64. DOI: 10.52866/ijcsm.2023.01.01.0018
7. Ивахненко Е.Н., Никольский В.С. ChatGPT в высшем образовании и науке: угроза или ценный ресурс? // Высшее образование в России. 2023. Т. 32. No. 4. С. 9–22. DOI: 10.31992/08693617-2023-32-4-9-22
8. Anderson N., Belavy D.L., Perle S.M., Hendricks S., Hespanhol L., Verhagen E., Memon A.R. AI did not write this manuscript, or did it? Can we trick the AI text detector into generated texts? The potential future of ChatGPT and AI in Sports & Exercise Medicine manuscript generation // BMJ Open Sport & Exercise Medicine, 2023. Vol. 9. No. 1. e001568. DOI: 10.1136/bmjsem-2023-001568
9. Zamfiroiu A.,, Vasile D., Savu D. ChatGPT – A Systematic Review of Published Research Papers // Informatica Economică. 2023. Vol. 27. No 1. P. 5–16. DOI: 10.24818/issn14531305/27.1.2023.01
10. Zohery M. ChatGPT in Academic Writing and Publishing: A Comprehensive Guide. In: Artificial Intelligence in Academia, Research and Science: ChatGPT as a Case Study. Chapter 2. Publisher: Achtago Publishing. 2023. P. 10-61. DOI: 10.5281/zenodo.7803703
11. Liebrenz M., Schleifer R., Buadze A., Bhugra D., Smith A. Generating scholarly content with ChatGPT: ethical challenges for medical publishing // The Lancet Digital Health. 2023. Vol. 5. No. 3. P. e105-e106. DOI: 10.1016/S25897500(23)00019-5
12. Liu J., Shen D., Zhang Y., Dolan W.B., Carin L., Chen W. What Makes Good In-Context Examples for GPT-3? // Proceedings of Deep Learning Inside Out (DeeLIO 2022): The 3rd Workshop on Knowledge Extraction and Integration for Deep Learning Architectures. 2022. No. 3. P. 100–114. DOI: 10.18653/v1/2022.deelio-1.10
13. Cox A. How artificial intelligence might change academic library work: Applying the competencies literature and the theory of the professions // Journal of the Association for Information Science and Technology. 2023. Vol. 74. No. 3. P. 367–380. DOI: 10.1002/asi.24635
14. Dergaa I., Chamari K., Zmijewski P., Ben Saad H. From Human Writing to Artificial Intelligence Generated Text: Examining the Prospects and potential threats of ChatGPT in Academic Writing // Biology of Sport. 2023. No. 40. P. 615– 622. DOI: 10.24412/1993-8780-2023-2-37-46
15. Alkaissi H, McFarlane S.I. Artificial Hallucinations in ChatGPT: Implications in Scientific Writing // Cureus. 2023. Vol. 15. No. 2: e35179. DOI: 10.7759/cureus.35179
16. Lund B.,Wang T., Mannuru N.R., Nie B., Shimray S., Wang Z. ChatGPT and a New Academic Reality: Artificial Intelligence-Written Research Papers and the Ethics of the Large Language Models in Scholarly Publishing // Journal of the Association for Information Science and Technology. 2023. Vol. 74. No. 5. P. 570–581. DOI: 10.1002/asi.24750
17. Best Practices for Using AI When Writing Scientific Manuscripts // ACS Nano. 2023. Vol. 17. No. 5. P. 4091–4093. DOI: 10.1021/acsnano.3c01544
18. Athaluri S.A., Manthena S.V., Kesapragada V.S.R.K.M., Yarlagadda V., Dave T., Duddumpudi R.T.S. Exploring the Boundaries of Reality: Investigating the Phenomenon of Artificial Intelligence Hallucination in Scientific Writing Through ChatGPT References // Cureus. 2023. Vol. 15. No. 4: e37432. DOI: 10.7759/cureus.37432
19. Altmäe S., Sola-Leyva A., Salumets A. Artificial intelligence in scientific writing: a friend or a foe? // Reproductive BioMedicine Online. 2023. Vol. 47. No. 1. P. 3–9. DOI:10.1016/j.rbmo.2023.04.009
20. Metze K., Morandin-Reis R., Lorand-Metze I., Florindo J. The Amount of Errors in ChatGPT’s Responses is Indirectly Correlated with the Number of Publications Related to the Topic Under Investigation // Annals of Biomedical Engineering. 2023. Vol. 51. No. 7. P. 1360–1361. DOI: 10.1007/s10439-023-03205-1
21. Golan R., Reddy R., Muthigi A., Ramasamy R. Artificial intelligence in academic writing: a paradigm-shifting technological advance // Nature Reviews Urology. 2023. Vol. 20. No. 6. P. 327– 328. DOI: 10.1038/s41585-023-00746-x
22. Wen J., Wang W. The future of ChatGPT in academic research and publishing: A commentary for clinical and translational medicine // Clin Transl Med. 2023. Vol. 13. No. 3, e1207. DOI: 10.1002/ctm2.1207
23. Cascella M., Montomoli J., Bellini V., Elena B. Evaluating the Feasibility of ChatGPT in Healthcare: An Analysis of Multiple Clinical and Research Scenarios // Journal of Medical Systems. 2023. Vol. 47. No. 1. DOI: 10.1007/s10916-02301925-4
24. Hill-Yardin E., Hutchinson M., Laycock R., Spencer S. A Chat(GPT) about the future of scientific publishing // Brain, Behavior, and Immunity. 2023. Vol. 110. No. 2. P. 152–154. DOI: 10.1016/j.bbi.2023.02.022
25. Kohli S.S. Using CHAT GPT to write scientific manuscripts: Frame of reference // J Contemp Orthod. 2023. Vol. 7. No. 1. P. 1–2. DOI: 10.18231/j.jco.2023.001
26. Kutela B., Msechu K., Das S., Kidando E, Chatgpt’s Scientific Writings: A Case Study on Traffic Safety. SSRN. Rochester. NY. Jan. 19. 2023. DOI: 10.2139/ssrn.4329120 27. Dale R. GPT-3 What’s it good for? // Natural Language Engineering. 2021. Vol.
27. No. 1. P. 113–118. DOI: 10.1017/S1351324920000601
28. Rahman M., Terano H.J.R., Rahman N., Salamzadeh A., Rahaman S. ChatGPT and Academic Research: A Review and Recommendations Based on Practical Examples // Journal of Education, Management and Development Studies. 2023. Vol. 3. No. 1. P. 1–12. DOI: 10.52631/jemds. v3i1.175
29. Wang X., Lin X., Shao B. Artificial intelligence changes the way we work: A close look at innovating with chatbots // Journal of the Association for Information Science and Technology. 2022. Vol. 74. No. 3. P. 339–353. DOI: 10.1002/asi.24621
30. Neumann M., Rauschenberger M., Schön E.-M. “We Need To Talk About ChatGPT”: The Future of AI and Higher Education. Preprint. 2023. DOI: 10.25968/opus-2467
31. Gao C.A., Howard F.M., Markov N.S., Dyer E.C., Ramesh S., Luo Y., Pearson A.T. Comparing scientific abstracts generated by ChatGPT to real abstracts with detectors and blinded human reviewers // NPJ Digit Med. 2023. Apr. 26. Vol. 6. No. 1. Article no. 75. DOI: 10.1038/s41746-02300819-6
32. Bender E.M., Gebru T., McMillan-Major A., Shmitchell S. On the Dangers of Stochastic Parrots // Proceedings of the 2021 ACM Conference on Fairness, Accountability, and Transparency. 2021. DOI: 10.1145/3442188.3445922
33. Etzioni O. Artificial intelligence: AI zooms in on highly influential citations // Nature. 2017. Vol. 547. No. 7661. Article no. 32. DOI: 10.1038/547032a
34. Hancock J.T., Naaman M., Levy K. AI-Mediated Communication: Definition, Research Agenda, and Ethical Considerations // Journal of Computer-Mediated Communication. 2020. Vol. 25. No. 1. P. 89–100. DOI: 10.1093/jcmc/zmz022
35. Hristov K. Artificial Intelligence and the Copyright Dilemma // IDEA: The IP Law Review, 2017. Vol. 57. No. 3. URL: https://ssrn.com/abstract=2976428 (дата обращения 02.07.23).
36. Stokel-Walker C. ChatGPT listed as author on research papers: many scientists disapprove // Nature. 2023. Vol. 613. No. 7945. P. 620–621. DOI: 10.1038/d41586-023-00107-z
37. Thorp H.H. ChatGPT is fun, but not an author // Science. 2023. Jan 27. Vol. 379. No. 6630. Article no., 313. DOI: 10.1126/science.adg7879
38. Zech H. Liability for AI: public policy considerations // ERA Forum. 2021. Vol. 22. No. 1. P. 147– 158. DOI: 10.1007/s12027-020-00648-0
39. Santini A. The Importance of Referencing // J Crit Care Med (Targu Mures). 2018. Vol. 4. No. 1. P. 3–4. DOI: 10.1515/jccm-2018-0002
40. Ha T. An explainable artificial-intelligencebased approach to investigating factors that influence the citation of papers // Technological Forecasting and Social Change, Elsevier. 2022. Vol. 184. Article no. 121974. DOI: 10.1016/j.techfore.2022.121974
41. Kocak Z., Altay S. Balkan Medical Journal Policy on the Use of Chatbots in Scientific Publications // Balkan Medical Journal. 2023. Vol. 40. No. 3. P. 149–150. DOI: 10.4274/balkanmedj.galenos.2023.17042023
42. Gasparyan A.Y., Nurmashev B., Seksenbayev B., Trukhachev V.I., Kostyukova E.I., Kitas G.D. Plagiarism in the Context of Education and Evolving Detection Strategies // Journal of Korean Medical Science. 2017. Vol. 32. No. 8. P. 1220–1227. DOI: 10.3346/jkms.2017.32.8.1220
43. O’Connor P., Cargill M. Writing Scientific Research Articles. UK: Willey-Backwel, 2013. 240 p. ISBN: 978-1-118-57070-8.
44. Dominiczak M.H. Art, Science, Words, and IMRAD // Clinical Chemistry. 2013. Vol. 59. No. 12. P. 1829–1831. DOI: 10.1373/clinchem.2012.199984
45. Короткина И.Б. Английский язык для научно-публикационных целей как новое направление педагогических исследований // Отечественная и зарубежная педагогика. 2018. Т. 1. № 4 (52). С. 115–130. EDN: XZRFKH.
46. Попова Н.Г., Коптяева Н.Н. Академическое письмо: Статьи IMRAD. Екатеринбург : ИФиП УрО РАН, 2015. 160 с. ISBN: 97859905636-2-9.
47. Зашихина И.М., Печинкина О.В. Формат научных публикаций IMRAD для социально-гуманитарных исследований: шанс быть услышанным // Высшее образование в России. 2022. Т. 31. № 10. С. 150–168. DOI: 10.31992/08693617-2022-31-10-150-168
48. Короткина И.Б. Академическое письмо: процесс, продукт и практика: учебное пособие для вузов. М.: Юрайт, 2015. 295 с. URL: https://urait.ru/bcode/531042 (дата обращения: 02.07.2023).
49. Broek E., Olczak N., Dellmuth L. The Involvement of Civil Society Organizations in Arctic Governance // SIPRI Insights on Peace and Security. 2023. No. 2023/02. DOI: 10.55163/NKQM8574
50. Arctic Yearbook 2022: The Russian Arctic: Economics, Politics & Peoples: ed. by L. Heininen, H. Exner-Pirot, J. Barnes. Akureyri, Iceland: Arctic Portal, 2022. Available at: https://www.arcticyearbook.com (дата обращения: 02.07.2023). ISSN: 2298–2418.
51. Landriault M., Chater A., Wilson Rowe E., Lackenbauer P.W. Governing Complexity in the Arctic Region (1st ed.). London: Routledge, 2019. – 148 p. DOI: 10.4324/9780429299551
52. Liu N. China’s emerging Arctic policy: What are the implications for Arctic governance? // Jindal Global Law Review. 2017. Vol. 8. No. 1. P. 55–68. DOI: 10.1007/s41020-017-0041-3
53. Rewizorski M. Running away from Weltschmerz: Global Governance and a Double Challenge for the Future of Multilateralism // International Organisations Research Journal. 2020. Vol. 14. No. 4. P. 28–47. DOI: 10.17323/1996-7845-2019-04-02
54. Rowe E. Arctic Governance. Manchester University Press, 2018. 177 p. DOI: 10.7765/9781526131645
55. Young O.R. Is It Time for a Reset in Arctic Governance? // Sustainability. 2019. Vol. 11. No. 16. Article no. 4497. DOI: 10.3390/SU11164497
56. Malito D.V., Umbach G., Bhuta N. The Palgrave Handbook of Indicators in Global Governance. Palgrave Macmillan. 2018. 562 p. DOI: 10.1007/978-3-319-62707-6
57. Steinveg B. The Arctic Governance Architecture in: Arctic Governance Through Conferencing: Actors, Agendas and Arenas. Springer International Publishing. 2023. P. 125–149. DOI: 10.1007/978-3-031-23332-6
58. Журавель В.П. Арктика в 2022 г.: итоги и перспективы // Научно-аналитический вестник ИЕ РАН. 2023. № 1. С. 95–102. DOI: 10.15211/vestnikieran1202395102
59. Andreeva S. Science at Stake – Russia and the Arctic Council // Arctic Review on Law and Politics. 2023. Vol. 14. P. 112–131. DOI: 10.23865/arctic.v14.5455
60. Salygin V., Guliyev I., Ruzakova V. Prospects of International Cooperation in the Arctic Under the Russian Chairmanship of the Arctic Council in 2021–2023: Sustainable Shipping, “Green” Technology and Innovation // Current Problems of the Global Environmental Economy Under the Conditions of Climate Change and the Perspectives of Sustainable Development. Springer International Publishing. 2023. DOI: 10.1007/978-3031-19979-0_8
Рецензия
Просмотров:
1524
Послать статью по эл. почте 