<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">cyberspace</journal-id><journal-title-group><journal-title xml:lang="ru">Философские проблемы информационных технологий и киберпространства</journal-title><trans-title-group xml:lang="en"><trans-title>Philosophical Problems of IT &amp; Cyberspace (PhilIT&amp;C)</trans-title></trans-title-group></journal-title-group><issn pub-type="epub">2305-3763</issn><publisher><publisher-name>Пятигорский государственный университет</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.17726/philIT.2024.1.3</article-id><article-id custom-type="elpub" pub-id-type="custom">cyberspace-308</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>Статьи</subject></subj-group></article-categories><title-group><article-title>Большие языковые модели и их роль в современных научных открытиях</article-title><trans-title-group xml:lang="en"><trans-title>Large language models and their role in modern scientific discoveries</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Филимонов</surname><given-names>В. Ю.</given-names></name><name name-style="western" xml:lang="en"><surname>Filimonov</surname><given-names>V. Yu.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Филимонов Владимир Юрьевич - аспирант Института подготовки кадров высшей квалификации.</p><p>Пятигорск</p></bio><bio xml:lang="en"><p>Vladimir Yu. Filimonov - postgraduate student at the Institute of Top-Qualification Personnel Training, Pyatigorsk State University.</p><p>Pyatigorsk</p></bio><email xlink:type="simple">fil2016vo@yandex.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Пятигорский государственный университет</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Pyatigorsk State University</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2024</year></pub-date><pub-date pub-type="epub"><day>11</day><month>07</month><year>2024</year></pub-date><volume>0</volume><issue>1</issue><fpage>42</fpage><lpage>57</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Филимонов В.Ю., 2024</copyright-statement><copyright-year>2024</copyright-year><copyright-holder xml:lang="ru">Филимонов В.Ю.</copyright-holder><copyright-holder xml:lang="en">Filimonov V.Y.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://cyberspace.pgu.ru/jour/article/view/308">https://cyberspace.pgu.ru/jour/article/view/308</self-uri><abstract><p>Сегодня большие языковые модели являются очень мощным информационно‑аналитическим инструментом, значительно ускоряющим большинство существующих методов и методологий обработки информационных процессов. Особую значимость в этом качестве получает научная информация, в которую постепенно вовлекаются мощности больших языковых моделей. Такое взаимодействие науки и качественно новых возможностей работы с информацией приводит нас к новым, уникальным научным открытиям, их большому количественному многообразию. Происходит ускорение научного поиска, сокращение временных затрат на его осуществление – высвободившееся время можно потратить как на решение новых научных проблем, так и на научное творчество, которое хотя может и необязательно привести к конкретному решению того или иного научного вопроса, но способно продемонстрировать красоту науки в различных дисциплинарных направлениях. В результате взаимодействие больших языковых моделей и научной информации – это одновременно и поиск‑решение научных проблем, и научное творчество. Решение задач науки требует возможности эффективной обработки больших данных, что нельзя осуществить без эффективного метода. Одним из значимых методов стала архитектура Transformer, представленная в 2017 году и комплексно интегрированная в модель GPT‑3, которая, по состоянию на сентябрь 2020 года, являлась самой крупной и продвинутой языковой моделью в мире. Поэтому GPT‑3 можно назвать базисом большинства научных разработок, осуществляемых в контексте использования больших языковых моделей. Взаимодействие науки и больших языковых моделей стало фактором возникновения большого количества вопросов, среди которых можно выделить такие: является ли результат анализа данных новым знанием, каковы перспективы научного творчества в эпоху больших вычислений. В настоящее время эти вопросы крайне значимы, поскольку именно они позволяют выработать основы эффективного взаимодействия человека и компьютера. Поэтому в данном исследовании производится анализ представленных вопросов.</p></abstract><trans-abstract xml:lang="en"><p>Today, large language models are very powerful, informational and analytical tools that significantly accelerate most of the existing methods and methodologies for processing informational processes. Scientific information is of particular importance in this capacity, which gradually involves the power of large language models. This interaction of science and qualitative new opportunities for working with information lead us to new, unique scientific discoveries, their great quantitative diversity. There is an acceleration of scientific research, a reduction in the time spent on its implementation – the freed up time can be spent both on solving new scientific problems and on scientific creativity, which, although it may not necessarily lead to a specific solution to a particular scientific problem, but is able to demonstrate the beauty of science in various disciplinary areas. As a result, the interaction of large language models and scientific information is at the same time a research for solutions to scientific problems, scientific problems, and scientific creativity. Solving scientific problems requires the ability to efficiently process big data, which cannot be done without an effective method – one of the significant methods was the Transformer architecture, introduced in 2017 and comprehensively integrated into the GPT‑3 model, which, as of September 2020, was the largest and most advanced language model in the world. Therefore, GPT‑3 can be called the basis of most scientific developments carried out in the context of using large language models. The interaction of science and large language models has become a factor in the emergence of a large number of questions, among which are: «Is the result of data analysis new knowledge?», «What are the prospects for scientific creativity in the era of big computing?». Currently, these issues are extremely important, because they allow us to develop the foundations for effective human‑computer interaction. Therefore, this study analyzes the issues presented.</p></trans-abstract><kwd-group xml:lang="ru"><kwd>большие языковые модели</kwd><kwd>LLM</kwd><kwd>научное открытие</kwd><kwd>компьютерный алгоритм</kwd><kwd>анализ данных</kwd><kwd>результат анализа данных</kwd><kwd>научное творчество</kwd><kwd>большие вычисления</kwd><kwd>искусственный интеллект</kwd></kwd-group><kwd-group xml:lang="en"><kwd>large language models</kwd><kwd>LLM</kwd><kwd>scientific discovery</kwd><kwd>computer algorithm</kwd><kwd>data analysis result</kwd><kwd>scientific creativity</kwd><kwd>Big Data</kwd><kwd>artificial intelligence</kwd></kwd-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Romera‑Paredes, B., Barekatain, M., Novikov, A. et al. (2024) Mathematical discoveries from program search with large language models. Nature 625, P. 468‑475.</mixed-citation><mixed-citation xml:lang="en">Romera‑Paredes, B., Barekatain, M., Novikov, A. et al. (2024) Mathematical discoveries from program search with large language models. Nature 625, P. 468‑475.</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Trinh, T.H., Wu, Y., Le, Q.V. et al. (2024) Solving Olympiad geometry without human demonstrations. Nature 625, P. 476‑482.</mixed-citation><mixed-citation xml:lang="en">Trinh, T.H., Wu, Y., Le, Q.V. et al. (2024) Solving Olympiad geometry without human demonstrations. Nature 625, P. 476‑482.</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Gonthier, G. et al. (2013) A Machine‑Checked Proof of the Odd Order Theorem. In: Blazy, S., Paulin‑Mohring, C., Pichardie, D. (eds) Interactive Theorem Proving. ITP 2013. Lecture Notes in Computer Science, vol. 7998. Springer, Berlin, Heidelberg.</mixed-citation><mixed-citation xml:lang="en">Gonthier, G. et al. (2013) A Machine‑Checked Proof of the Odd Order Theorem. In: Blazy, S., Paulin‑Mohring, C., Pichardie, D. (eds) Interactive Theorem Proving. ITP 2013. Lecture Notes in Computer Science, vol. 7998. Springer, Berlin, Heidelberg.</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Iten, R., Metger, T., Wilming, H., del Rio L., Renner R. (2020) Discovering Physical Concepts with Neural Networks. Phys. Rev. Lett. Vol. 124, P. 1‑6.</mixed-citation><mixed-citation xml:lang="en">Iten, R., Metger, T., Wilming, H., del Rio L., Renner R. (2020) Discovering Physical Concepts with Neural Networks. Phys. Rev. Lett. Vol. 124, P. 1‑6.</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Fawzi, A., Balog, M., Huang, A. et al. (2022) Discovering faster matrix multiplication algorithms with reinforcement learning. Nature 610, P. 47‑53.</mixed-citation><mixed-citation xml:lang="en">Fawzi, A., Balog, M., Huang, A. et al. (2022) Discovering faster matrix multiplication algorithms with reinforcement learning. Nature 610, P. 47‑53.</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Melnikov, A. A. (2019) Predicting quantum advantage by quantum walk with convolutional neural networks. New Journal of Physics, Vol. 21, No. 12. P. 1‑11.</mixed-citation><mixed-citation xml:lang="en">Melnikov, A. A. (2019) Predicting quantum advantage by quantum walk with convolutional neural networks. New Journal of Physics, Vol. 21, No. 12. P. 1‑11.</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Liew, A. (2007) Understanding Data, Information, Knowledge And Their Inter‑Relationships. Journal of Knowledge Management Practice. Vol. 7, P. 1‑10.</mixed-citation><mixed-citation xml:lang="en">Liew, A. (2007) Understanding Data, Information, Knowledge And Their Inter‑Relationships. Journal of Knowledge Management Practice. Vol. 7, P. 1‑10.</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Поручиков М. А. Data analysis. Samara: Izd‑vo Samarskogo universiteta, 2016. 88 с.</mixed-citation><mixed-citation xml:lang="en">Поручиков М. А. Data analysis. Samara: Izd‑vo Samarskogo universiteta, 2016. 88 с.</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Data analysis technologies / Садовникова Н. П., Щербаков М. В. Volgograd: VolgGTU, 2021. 75 с.</mixed-citation><mixed-citation xml:lang="en">Data analysis technologies / Садовникова Н. П., Щербаков М. В. Volgograd: VolgGTU, 2021. 75 с.</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">Никифоров А. Л. Analysis of the concept of «knowledge»: approaches and problems // Epistemology &amp; Philosophy of Science. 2009. № 3. С. 61‑73.</mixed-citation><mixed-citation xml:lang="en">Никифоров А. Л. Analysis of the concept of «knowledge»: approaches and problems // Epistemology &amp; Philosophy of Science. 2009. № 3. С. 61‑73.</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Касавин И. Т. Encyclopedia of Epistemology and Philosophy of Science. M.: «Kanon+», ROOI «Reabilitaciya», 2009. 1248 c.</mixed-citation><mixed-citation xml:lang="en">Касавин И. Т. Encyclopedia of Epistemology and Philosophy of Science. M.: «Kanon+», ROOI «Reabilitaciya», 2009. 1248 c.</mixed-citation></citation-alternatives></ref><ref id="cit12"><label>12</label><citation-alternatives><mixed-citation xml:lang="ru">Барышников П. Н. Metaforicheskie osnovaniya komp`yutacionalizma v kognitivny`x naukax i filosofii soznaniya // Filosofiya nauki i texniki. 2018. № 2. С. 61‑72.</mixed-citation><mixed-citation xml:lang="en">Барышников П. Н. Metaforicheskie osnovaniya komp`yutacionalizma v kognitivny`x naukax i filosofii soznaniya // Filosofiya nauki i texniki. 2018. № 2. С. 61‑72.</mixed-citation></citation-alternatives></ref><ref id="cit13"><label>13</label><citation-alternatives><mixed-citation xml:lang="ru">Барышников П. Н. Filosofiya it, high‑hume i … mifologiya // Filosofskie problemy` informacionny`x texnologij i kiberprostranstva. 2012. № 1. С. 15‑23.</mixed-citation><mixed-citation xml:lang="en">Барышников П. Н. Filosofiya it, high‑hume i … mifologiya // Filosofskie problemy` informacionny`x texnologij i kiberprostranstva. 2012. № 1. С. 15‑23.</mixed-citation></citation-alternatives></ref><ref id="cit14"><label>14</label><citation-alternatives><mixed-citation xml:lang="ru">Digital Пётр – Распознавание рукописей Петра I с помощью компьютерного зрения // SberA I. https://fusionbrain.ai/digital-petr.</mixed-citation><mixed-citation xml:lang="en">Digital Пётр – Распознавание рукописей Петра I с помощью компьютерного зрения // SberA I. https://fusionbrain.ai/digital-petr.</mixed-citation></citation-alternatives></ref><ref id="cit15"><label>15</label><citation-alternatives><mixed-citation xml:lang="ru">AlphaFold reveals the structure of the protein universe // Google DeepMind. https://deepmind.google/discover/blog/alphafold-reveals-the-structure-of-the-protein-universe.</mixed-citation><mixed-citation xml:lang="en">AlphaFold reveals the structure of the protein universe // Google DeepMind. https://deepmind.google/discover/blog/alphafold-reveals-the-structure-of-the-protein-universe.</mixed-citation></citation-alternatives></ref><ref id="cit16"><label>16</label><citation-alternatives><mixed-citation xml:lang="ru">Летние конференции Турнира городов // Международный математический Турнир Городов. https://turgor.ru/lktg.</mixed-citation><mixed-citation xml:lang="en">Летние конференции Турнира городов // Международный математический Турнир Городов. https://turgor.ru/lktg.</mixed-citation></citation-alternatives></ref><ref id="cit17"><label>17</label><citation-alternatives><mixed-citation xml:lang="ru">Технология обработки сейсмических данных на основе асимптотических методов и методов машинного обучения для поиска и описания трещиноватых коллекторов // Российский научный фонд. https://www.rscf.ru/project/21-71-20002.</mixed-citation><mixed-citation xml:lang="en">Технология обработки сейсмических данных на основе асимптотических методов и методов машинного обучения для поиска и описания трещиноватых коллекторов // Российский научный фонд. https://www.rscf.ru/project/21-71-20002.</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
