Отправляет email-рассылки с помощью сервиса Sendsay

Эконометрика

  Все выпуски  

Эконометрика - выпуск 1284


"Эконометрика", 1284 выпуск, от 1 сентября 2025 года.

Электронная газета кафедры "Экономика и организация производства" научно-учебного комплекса "Инженерный бизнес и менеджмент" МГТУ им.Н.Э. Баумана. Выходит с 2000 г.

Здравствуйте, уважаемые подписчики!

*   *   *   *   *   *   *

Предлагаем статью А.И. Орлова "Состояние и перспективы развития статистических методов в экономике".

"Вокруг искусственного интеллекта складывается очень тревожная структура знаний и компетенций", доказывает директор Института проблем управления РАН академик РАН Дмитрий Александрович Новиков.

В плеяде замечательных русских писателей-классиков стоит и имя Н.С. Лескова (1831-1895). Его творчеству посвящена статья "Мне за народ умереть хочется" Аэлиты Засимовой (Пушкино, Московская обл.).

Все вышедшие выпуски доступны в Архиве рассылки по адресу subscribe.ru/catalog/science.humanity.econometrika.

*   *   *   *   *   *   *

УДК 330.5 : 519.2

5.2.2. Математические, статистические и инструментальные методы в экономике (физико-математические науки, экономические науки)

Состояние и перспективы развития статистических методов в экономике

Орлов Александр Иванович, д.э.н., д.т.н., к.ф.-м.н., профессор, РИНЦ SPIN-код: 4342-4994, prof-orlov@mail.ru, Московский государственный технический университет им. Н.Э. Баумана, Россия, 105005, Москва, 2-я Бауманская ул., 5,

В научной специальности 5.2.2 "Математические, статистические и инструментальные методы в экономике" одна из трёх основных составляющих - это "статистические методы в экономике". В статье кратко рассмотрены история и современное состояние статистики как самостоятельной науки, а также обсуждены перспективы её развития. Статистические исследования проводятся с древнейших времён. В Ветхом Завете есть Четвертая книга Моисеева, которая называется "Числа". В ней рассказывается о переписи военнообязанных - в 12 коленах переписаны 603550 человек. Сотрудниками Межфакультетской лаборатории статистических методов МГУ им. М.В. Ломоносова собрано около 200 определений термина "статистика", взятых из публикаций как отечественных, так и зарубежных авторов. Эти определения позволяют проследить изменение содержания термина "статистика" во времени. Более 150 лет назад выделены две ветви статистической науки, на которые она делится и в настоящее время. Первая - развитие статистических методов. Вторая - ведомственная наука Росстата. Рассмотрена смена парадигм в развитии статистических методов. Современная революция в математических и статистических методах исследования основана на новой парадигме статистики. Одна из её черт - переход от прежних математических чисел к прагматическим числам, характерной чертой которых является нечёткость (размытость, расплывчатость), и создание системной нечёткой интервальной математики. Поскольку распределения реальных данных, как правило, нет оснований считать нормальными (гауссовскими), необходимо развивать и использовать непараметрические методы статистики. В ходе научной революции центральной областью прикладной статистики стала статистика нечисловых данных. Резко возросла роль компьютерной техники, информационно-коммуникационных технологий, искусственного интеллекта. Обсуждается неудовлетворительное состояние "росстатовской" ветви статистической науки в нашей стране. Наиболее важной задачей на современном этапе является широкое распространение информации о революции в математических и статистических методах исследования и полученных в соответствии с ней научных результатов на основе современной парадигмы

Ключевые слова: статистические методы, определения статистики, развитие, смена парадигм, научная революция, системная нечеткая интервальная математика, отечественная статистическая наука

UDC 330.5 : 519.2

5.2.2. Mathematical, statistical and instrumental methods of economics (physical and mathematical sciences, economic sciences)

The state and prospects of development of statistical methods in economics

Orlov Alexander Ivanovich, Dr.Sci.Econ., Dr.Sci.Tech., Cand.Phys-Math.Sci., professor, RSCI SPIN-code: 4342-4994, Bauman Moscow State Technical University, Moscow, Russia

In the scientific specialty 5.2.2 "Mathematical, statistical and instrumental methods in economics", one of the three main components is "statistical methods in economics". The article briefly examines the history and current state of statistics as an independent science, as well as discusses the prospects for its development. Statistical research has been conducted since ancient times. There is a Fourth Book of Moses in the Old Testament called Numbers. It tells about the census of those liable for military service - 603,550 people were registered in 12 tribes. The staff of the Interfacult Laboratory of Statistical Methods of Lomonosov Moscow State University has collected about 200 definitions of the term "statistics" taken from publications by both domestic and foreign authors. These definitions allow us to trace the change in the content of the term "statistics" over time. More than 150 years ago, two branches of statistical science were distinguished, into which it is still divided. The first is the development of statistical methods. The second is the departmental science of Rosstat. A paradigm shift in the development of statistical methods is considered. The modern revolution in mathematical and statistical research methods is based on a new statistical paradigm. One of its features is the transition from the old mathematical numbers to pragmatic numbers, which are characterized by fuzziness (blurriness, vagueness), and the creation of systematic fuzzy interval mathematics. Since the distributions of real data, as a rule, there is no reason to consider normal (Gaussian), it is necessary to develop and use nonparametric statistical methods. During the scientific revolution, non-numerical data statistics became the central area of applied statistics. The role of computer technology, information and communication technologies, and artificial intelligence has increased dramatically. The unsatisfactory state of the "Rosstat" branch of statistical science in our country is discussed. The most important task at the present stage is to widely disseminate information about the revolution in mathematical and statistical research methods and the scientific results obtained in accordance with it based on the modern paradigm

Keywords: statistical methods, definitions statistics, development, paradigm shift, scientific revolution, systematic fuzzy interval mathematics, russian statistical science

Введение

В научной специальности 5.2.2 "Математические, статистические и инструментальные методы в экономике (физико-математические науки, экономические науки)" одна из трёх основных составляющих - это "статистические методы в экономике". Предыдущие версии перечня научных специальностей ВАК содержали две специальности:

08.00.12 - Бухгалтерский учёт, статистика (экономические науки);

08.00.13 - Математические и инструментальные методы экономики (экономические науки).

Эти две специальности были объединены. Каков вклад специальности 08.00.12 в объединённую специальность? Для ответа на этот вопрос необходимо выявить основное содержание статистической составляющей специальности 08.00.12. Это содержание отражено в многочисленных учебниках под названиями "Статистика" и "Общая теория статистики".

Для подобного анализа целесообразно кратко рассмотреть историю и современное состояние статистики как самостоятельной науки, а затем обсудить перспективы развития статистических методов в экономике. Этим вопросам и посвящена настоящая статья.

Кратко об истории статистики

В нашей стране наиболее авторитетным научным центром в области статистики была созданная академиком АН СССР А.Н. Колмогоровым Межфакультетская лаборатория статистических методов Московского государственного университета им. М.В. Ломоносова. В выпущенной сотрудниками этой лаборатории работе [1] приведено около 200 определений термина "статистика", взятых из публикаций как отечественных, так и зарубежных авторов. Эти определения позволяют проследить изменение содержания термина "статистика" во времени.

Статистические исследования проводятся с древнейших времён. Так, в Библии в Ветхом Завете есть Четвертая книга Моисеева, которая называется "Числа". В ней рассказывается о переписи военнообязанных. Приведены её результаты - в 12 коленах переписаны 603550 человек. В дальнейшем постоянно проводились статистические исследования, прежде всего для нужд налогообложения. В нашей стране они назывались "ревизские сказки".

На особенностях статистического учёта населения основана бизнес-идея предпринимателя Чичикова - героя произведения Н.В. Гоголя "Мёртвые души". Умершие после последней переписи крестьяне с точки зрения государства числились живыми. Их можно было продавать. Это было выгодно помещикам, поскольку за крестьян надо было платить налоги. Чичиков планировал закупить по дешёвке достаточное количество "мёртвых душ", заложить их в банке и получить кредит. Затем он планировал их "вывод" (переселение) на окраину Российской империи - в Астраханскую губернию. Заключительный шаг - местные власти признают их умершими от холеры (за соответствующую мзду), на основании чего банк освобождает Чичикова от необходимости погашать взятый им кредит.

В Библии нет слов "статистик" или "статистика". Как пишет проф. В.В. Налимов в предисловии к работе [1, с.3], слово "статистик" впервые появляется в художественной литературе - в "Гамлете" (1602 г.). В этой пьесе статистиками названы придворные. Можно предположить, что исходным является латинское слово status, смысл которого - политическое состояние.

Первое определение, приведённое в [1, с. 6], относится к 1749 г. Оно таково: "...так называемая статистика является государствоведением (наукой об управлении) отдельного государства... Государствоведение содержит основные сведения о характерных чертах цивилизованного общества".

В течение более чем 100 дальнейших лет во всех включённых в [1, с. 6-11] определениях под статистикой понимается государствоведение. За двумя исключениями. По мнению Наполеона Бонапарта: "Статистика - это бюджет вещей" (не датировано). Можно констатировать, что он перешёл от государствоведения к управленческому учёту, который может применяться, в том числе, на отдельном предприятии. К 1833 г. относится определение: "Цель статистики заключается в представлении фактов в наиболее сжатой форме".

Только в последней трети XIX в. наблюдается отход от отождествления статистики с государствоведением, хотя и лишь у некоторых авторов. Например, к 1868 г. относится определение: "Статистика - познание фактов на основе представления их в виде, в котором можно сравнивать их численные значения" [1, с. 18].

Только в 1872 г. появляется определение, в котором чётко выделяются две ветви статистической науки, на которые она делится и в настоящее время: "Статистика - 1) те методы, которые исследуют состояния и события путём массовых наблюдений; 2) наука о множестве явлений в государствах и группах людей, об их колебаниях и законах" [1, с. 18]. В настоящее время первая ветвь - это математическая статистика и прикладная статистика, а вторая - ведомственная наука Росстата как одна из экономических дисциплин.

Приведём ещё несколько определений.

"Статистика состоит в наблюдении явлений, которые могут быть подсчитаны или выражены посредством чисел" (1895 г., [1, с. 22]).

"Статистика - это численное представление фактов из любой области исследования в их взаимосвязи" (1909 г., [1, с. 22]).

"Статистика есть совокупность методов и принципов, согласно которым производится сбор, анализ, сравнение, представление и интерпретация числовых данных" (1925 г., [1, с. 25]).

В 1954 г. академик АН УССР Б.В. Гнеденко дал следующее развёрнутое определение, которое представляется нам наиболее адекватным:

"Статистика состоит из трёх разделов:

1) сбор статистических сведений, т.е. сведений, характеризующих отдельные единицы каких-либо массовых совокупностей;

2) статистическое исследование полученных данных, заключающееся в выяснении тех закономерностей, которые могут быть установлены на основе данных массового наблюдения;

3) разработка приёмов статистического наблюдения и анализа статистических данных. Последний раздел, собственно, и составляет содержание математической статистики" [1, с. 31].

В том же году Р.А. Фишер написал: "Статистика как наука является одним из разделов прикладной математики, и её можно рассматривать как математику, применяемую при разработке результатов массового наблюдения" [1, с. 31].

И ещё три определения.

По мнению Б.Л. Ван дер Вардена: "...узловым вопросом математической статистики является вопрос; как далеко могут отклоняться величины, вычисленные по выборке, от соответствующих идеальных значений?" (1960 г., [1, с. 33]).

"Методы, при помощи которых статистические данные собираются, суммируются и используются на основе обобщения, известны как статистические методы, или статистика" (1968 г., [1, с. 42]).

"Мне нравится следующее короткое и по существу определение статистики: ‘Статистика занимается сбором и интерпретацией данных’" (1968 г., [1, с. 43]).

В приведённых определениях ведущие специалисты отмечают различные стороны статистической науки. Её развитию посвящена часть 1 монографии [2, с. 7-86]. Статистические методы в экономике имеют второе название - эконометрика [3].

Научные революции

Для рассмотрения состояния и перспектив развития статистических методов в экономике нам понадобится понятие "научная революция".

По словам один из лидеров историко-эволюционистского направления в философии науки Т. Куна: "Научные революции - это некумулятивные эпизоды развития науки, во время которых старая парадигма замещается целиком или частично новой парадигмой, не совместимой со старой" [4, с.129]. Понятие "научная революция" широко обсуждается специалистами в различных областях, прежде всего, философами (см., например, [5]). Хорошо известны революции в физике (при переходе от Аристотеля к Ньютону и в ХХ в., связанной с созданием квантовой механики, ядерной физики и теория относительности). Революция в биологии обусловлена появлением генетики, революция в истории - созданием новой статистической хронологии.

В этом ряду - и революция в математических и статистических методах исследования [6], основанная на новой парадигме в этой научно-практической области. В более ранних публикациях мы использовали термин "новая парадигма", но не термин "научная революция". Как пишет Т. Кун (см. выше), понятия, соответствующие этим терминам, неразрывно связаны. На примере прикладной математической статистики сравнение по 17 основным характеристикам старой и новой систем идей, взглядов и понятий (т.е. старой и новой парадигм) проведено нами в 2013 г. в статье [7].

Необходимо обсудить различные аспекты революции в математических методах исследования, которым посвящены, в частности, многочисленные статьи в "Научном журнале КубГАУ". Чтобы не загромождать статью, будем указывать в квадратных скобках только год, номер и страницы.

Мы не раз обращались к обсуждению новой парадигмы математических и статистических методов исследования, в частности, в [2014. No.98. С. 105-125] и [2016. No.122. С. 807-832]. Ей предшествовали две парадигмы, которые мы в [6] обозначили как примитивная и устаревшая.

Первая из них соответствует описательной стадии развития статистической науки [2], на которой использовались те или иные отдельные эвристические методы анализа данных. Например, построение таблиц, расчёт выборочного среднего арифметического, метод наименьших квадратов. Первая научная революция в математических методах исследования - это появление классической теории математической статистики, которая к середине ХХ в. была в основном разработана. Соответствующая ей парадигма отражена, в частности, в учебниках по теории вероятностей и математической статистике, по которым и в настоящее время учатся студенты различных специальностей.

Эту парадигму мы считаем устаревшей. На смену ей пришла новая (современная) парадигма, основы которой были выявлены в научно-общественном движении 1980-х годов, приведшем, в частности, к созданию Всесоюзной статистической ассоциации. Это движение было заторможено в 1990-х годах из-за проблем, порождённых развалом Советского Союза. Возрождение наступило уже в XXI в. Появилось большое число монографий, учебников, научных статей, подготовленных в соответствии с новой парадигмой математических методов исследования.

Надо отметить, что в развитии математики выделяют ряд научных революций. Первая - при переходе от эмпирических формул к появлению математики как науки. В Древней Греции появились теоремы, доказательства, аксиомы, прежде всего в геометрии.

Вторая революция - создание дифференциального и интегрального исчисления, введение в математику движения.

Третья - переход на язык теории множеств, повышенное внимание к аксиоматическим теориям (по Гильберту и Гёделю), переход к рассмотрению математики как науки о формальных системах, в частности, отделение математики от естествознания.

Сейчас происходит четвертая революция.

Дискуссии о научных революциях продолжаются (см., например, статью [8]).

Новая парадигма математических и статистических методов исследования раскрыта в системной нечёткой интервальной математике [9, 10]. Эту новую научную область мы рассматриваем как основу математики XXI века [2021. No.165. С. 111-130]. Она служит базой для разработки современного инструментария математических и статистических методов исследования.

В [6] внимание было сосредоточено на двух революционных моментах. Первый - переход от прежних математических чисел к прагматическим числам, характерной чертой которых является нечёткость (размытость, расплывчатость) [2013. No.91. С. 255-308]. В прикладной статистике речь идёт, прежде всего, о переходе к статистике интервальных данных [2013. No.94. С. 867 - 892]. Второй момент связан с тем, что распределения реальных данных, как правило, нельзя считать нормальными (гауссовскими) [2016. No.117. С. 71-90]. Как следствие, необходимо развивать и использовать непараметрические методы статистики [2015. No.106. С. 239-269].

Необходимо рассмотреть ещё целый ряд моментов.

Статистика нечисловых данных

В ходе научной революции центральной областью прикладной статистики стала статистика нечисловых данных [2020. No.156. С. 111-142]. Этот термин имеет синонимы: статистика объектов нечисловой природы, нечисловая статистика. В этой области элементы выборки лежат в нелинейных пространствах, их нельзя складывать и умножать на число. В инструментарии классических разделов математических методов исследования - в статистике чисел, векторов (в многомерном статистическом анализе), функций (в статистике случайных процессов и временных рядов) - центральное место занимали суммы и функции от сумм случайных элементов, лежащих в линейных пространствах. В статистике нечисловых данных подобных сумм нет, инструментарий основан на использовании расстояний и задач оптимизации.

В XXI в. основная часть публикаций по прикладной статистике в разделе "Математические методы исследований" журнала "Заводская лаборатория. Диагностика материалов", основном месте публикации отечественных исследований в области теории статистических методов, посвящена статистике нечисловых данных [11].

К этой области относится, в частности, современная теория измерений. Статистические методы анализа данных являются адекватными только тогда, когда полученные с их помощью выводы инвариантны относительно допустимых преобразований шкал, в которых измерены анализируемые данные. Основные шкалы - это шкалы наименований, порядковые, интервалов, отношений, разностей, отношений. Они позволяют выделить области соответствующих им методов анализа статистических данных [2017. No.134. С. 877 - 907].

Статистические методы в экономике и компьютеры

В ходе революции в математических методах исследования резко возросла роль компьютерной техники, информационно-коммуникационных технологий, искусственного интеллекта [2014. No.103. С. 163-195]. Если в рамках устаревшей парадигмы они использовались в основном лишь для расчётов значений показателей и таблиц функций распределения статистических критериев, то в настоящее время стали одним из основных инструментов исследователя [2019. No.154. С. 55-83].

Мощным инструментом разработчиков методов в области прикладной статистики являются предельные теоремы теории вероятностей - закон больших чисел, центральная предельная теорема и т.п. Ориентированные на математику специалисты призывают только ими и ограничиться. Однако для практического использования статистических методов предельных теорем недостаточно. Необходимо найти границу - выяснить, начиная с какого объёма выборки можно пользоваться результатами, полученными с помощью предельных теорем. И выяснить, как принимать решения, если объем имеющихся данных меньше этой границы.

Теоретические оценки скорости сходимости обычно значительно преувеличивают такие границы. В соответствии с новой парадигмой исследователю доступна универсальная "отмычка" - метод статистических испытаний (метод Монте-Карло), другими словами, имитационное моделирование. Он основан на использовании последовательности псевдослучайных чисел, свойства которых напоминают свойства рассматриваемых в теории вероятностей случайных величин. Основная идея состоит в последовательном выполнении следующих этапов: разработка вероятностно-статистической модели реального явления или процесса; планирование статистического испытания, в котором случайные величины заменяются псевдослучайными, полученными с помощью того или иного датчика; проведение большого числа испытаний (тысяч или миллионов); анализ полученных результатов расчётов.

Предельные теоремы - только необходимый первый шаг. Под "малой выборкой" понимают такую выборку, для которой нельзя применять выводы, основанные на предельных теоремах. В каждой конкретной задаче возникает необходимость разделить конечные объёмы выборки на два класса - те, для которых можно применять предельные теоремы, и те, для которых делать это нельзя из-за риска получения неверных выводов. Во втором случае необходимо вычислять распределения статистик при конкретных объёмах выборок. Вычислять с помощью программных продуктов, поскольку традиционное использование таблиц невозможно в принципе из-за того, что они имели бы непрактично большой объем.

В устаревшей парадигме исследователь задаёт уровень значимости (вероятность того, что нулевая гипотеза будет отвергнута, в то время как она верна). Затем он находит из таблиц соответствующее критическое значение, которое сравнивает со значением статистики критерия, на основе чего и принимает решение о принятии или отклонении нулевой гипотезы. Поскольку распределения ранговых статистик дискретны, то обычно невозможно выдержать заданное значение уровня значимости [2015. No.114. С. 42-54]. Современный подход предполагает переход от уровня значимости к достигаемому уровню значимости, т.е. к наименьшей величине уровня значимости, при которой нулевая гипотеза отвергается для данного значения статистики критерия. В перспективе программные продукты позволят находить достигаемый уровень значимости для любых наблюдаемых выборок.

Смена парадигм в развитии статистических методов

Современная парадигма предполагает значительную роль методологии при разработке и применении математических и статистических методов исследования [2014. No.104. С. 53-80; 2017. No.125. С. 319-345]. На её основе сформированы основные требования к статистическим методам анализа данных, позволяющие обеспечить построение адекватных вероятностно-статистических моделей реальных явлений и процессов, а затем обосновать выбор методов анализа данных [2022. No.181. С. 316-343]. Например, требование использовать непараметрические методы статистики вместо параметрических (в частности, основанных на непроверяемом предположении о нормальности распределений результатов измерений) - это типичное методологическое требование.

Особенностью современного этапа развитие математических методов исследования является сосуществование работ, выполненных в рамках всех рассматриваемых парадигм - примитивной, устаревшей и современной. Так, публикации Федеральной службы государственной статистики (Росстата) выполнены в основном согласно примитивной парадигме. Они содержат в основном таблицы, диаграммы и графики, как и работы XIX в. Однако их непосредственный анализ в ряде случаев позволяет получить полезные для практики выводы.

Устаревшая парадигма была господствующей в статистической теории первой половины ХХ в. Вначале математическая статистика (созданная как наука в начале ХХ в.) занималась проблемами оценивания и проверки гипотез применительно к постановкам, в которых предполагалось, что распределения элементов выборок принадлежат тому или иному параметрическому семейству. К середине ХХ в. параметрическая статистика была в основном разработана. Однако некоторые важные результаты были получены гораздо позже, вплоть до современности. К ним относятся, например, работы, в которых обоснована замена оценок максимального правдоподобия одношаговыми оценками [2015. No.109. С. 208 - 237], а также публикации по методам оценивания параметров гамма-распределения [2023. No.192. С. 142-157] и бета-распределения [2023. No.187. С. 184-206]. Значительная часть прикладных работ исходят из устаревшей парадигмы параметрической статистики.

На переднем крае математико-статистической науки находятся исследования по непараметрической и нечисловой статистике, исходящие из современной парадигмы. Отнюдь не все научные проблемы решены. Например, неизвестен аналог Центральной предельной теоремы в случае нечисловых данных общей природы. Необходима дальнейшая разработка моделей и методов анализа совпадений элементов выборок при применении непараметрических ранговых статистик [12]. Обратим внимание на нерешённые задачи, включённые в "цахкадзорскую тетрадь" [13] (название объясняется тем, что первоначальный список нерешённых задач был составлен участниками конференции по статистическим методам в армянском посёлке Цахкадзор).

Состояние статистической науки в нашей стране

Как уже отмечалось, более 150 лет назад были выделены две ветви статистической науки, на которые она делится и в настоящее время. Первая - развитие статистических методов. Вторая - ведомственная наука Росстата. О первой из этих ветвей дана информация выше. Обсудим вторую.

В нашей стране издано большое число учебников под названиями "Статистика", "Общая теория статистики". Анализ их содержания приводит к выводу о том, что излагаются различные статистические методы. Иногда к ним добавляется информация о работе Росстата и отдельных прикладных направлениях работы (например, о сельскохозяйственной статистике). Справедливо утверждает О.Б. Шейнин: "Наше заключение: теорией статистики может служить только математическая статистика" [14]. (Тем же автором выпущена адекватгая книга по истории статистики [15].)

Поразительно, что авторы подобных учебников включают в них лишь методы описательной и параметрической статистики, разработанные сто лет назад или раньше, т.е. учат в рамках устаревшей парадигмы. Нет ни слова про непараметрическую статистику или статистику нечисловых данных.

Не менее удивительно, что практически полностью игнорируются достижения отечественной статистики ХХ в. Например, в истории Академии наук есть только два её члена (члены-корреспонденты Н.В. Смирнов и Л.Н. Большев), которые занимались исключительно математической статистикой. Именно им принадлежит наиболее значительная статистическая книга ХХ в. - "Таблицы математической статистики" [16]. Однако их имён нет ни в учебном пособии [17], ни в Энциклопедии статистических терминов, подготовленной Росстатом в 2013 г. в 8 томах. В обширном томе 8 "Выдающиеся отечественные и зарубежные учёные в области статистики", содержащем информацию о сотнях специалистов прошлых веков, не нашлось места для выдающихся отечественных исследователей в области математической статистики и других статистических методов - для Н.В. Смирнова, Л.Н. Большева, профессоров В.В Налимова, Ю.К Беляева, Я.П. Лумельского, Л.Д. Мешалкина, Ю.Н. Беляева и многих, многих других. Причём речь идёт не только о ХХ в. Забыли об академике М.В. Остроградском, которого следует считать основоположником теории статистического контроля (не только в нашей стране, но и во всем мире). Его доклад 1846 г. на эту тему, порождённый потребностями снабжения армии, был опубликован в 1848 г. [18].

Состояние "росстатовской" ветви статистической науки следует считать крайне неудовлетворительной. Отрыв этого сообщества от работ последнего столетия поражает. Но надежду внушает попытка 1980-х годов объединить две ветви статистической науки, выразившаяся в создании в 1990 г. Всесоюзной статистической ассоциации [19]. К сожалению, в результате развала СССР эта общественная организация прекратила свою деятельность. Следовало бы её восстановить.

Заключение

Наиболее важной задачей на современном этапе является широкое распространение информации о революции в математических и статистических методах исследования и полученных в соответствии с ней научных результатов на основе современной парадигмы. Как теоретики, так и прикладники должны, как минимум, знать эту информацию, как максимум, применять новые результаты в своей работе. Необходима борьба с пережитками прошлого. Вместе с тем надо видеть место полученных в ходе революции результатов среди суждений, исходящих из многообразия новых терминов. Взаимосвязь искусственного интеллекта, нейросетей, больших данных и математических методов исследования обсуждается в [2024. No.201. С. 266-288].

Важна дальнейшая разработка требований к статистическим методам анализа данных [2022. No.181. С. 316-343], обеспечивающих их соответствие современной парадигме. При этом необходимо избежать ошибок, порождённых низкой квалификацией лиц, готовящих те или иные нормативные документы. С подобной ситуацией мы сталкивались при анализе государственных и международных стандартов по статистическим методам управления качеством в 1980-х гг. Как было установлено Рабочей группой из 66 специалистов (15 докторов и 36 кандидатов наук), несколько десятков из них содержали грубые ошибки и в итоге были отменены (об этих событиях рассказано в теме: Институт высоких статистических технологий и эконометрики [Электронный ресурс]. = URL: https://orlovs.pp.ru/forum/viewtopic.php?f=5&t=1360 (дата обращения 10.01.2025). Бесспорно совершенно, что опираться надо на научные результаты, а не на ошибочные материалы, пусть даже они называются ГОСТами (тем более, что в современных условиях любые ГОСТы не являются обязательными). Сомнительные ГОСТы и аналогичные материалы должны быть проанализированы и при обнаружении ошибок отменены. К сожалению, анализ подобных текстов требует много времени квалифицированных специалистов. Из-за отсутствия соответствующей организационной структуры и необходимых ресурсов такой анализ в отношении ряда нормативно-технических документов ещё не проведён, и подобные материалы, к сожалению, действуют.

Необходимы изменения в преподавании учебных курсов, посвящённых математическим и статистическим методам исследования, с целью обеспечения их соответствия новой парадигме. Ряд нужных для этого учебников уже выпущен нами в 2003 - 2024 гг.

Очевидно, необходимы серьёзные организационные усилия для реализации намеченной выше программы. Опыт работы "Научного журнала КубГАУ", кратко описанный выше, позволяет уверенно прогнозировать дальнейшее развитие научной революции в области математических и статистических методов в экономике. Нет сомнения, что её задачи будут выполнены.

Литература

1. Никитина Е.П., Фрейдлина В.Д., Ярхо А.В. Коллекция определений термина "статистика". - М.: МГУ им. М.В. Ломоносова, 1972. - 46 с.

2. Лойко В.И., Луценко Е.В., Орлов А.И. Высокие статистические технологии и системно-когнитивное моделирование в экологии: монография. - Краснодар: КубГАУ, 2019. - 258 с.

3. Орлов А.И. Эконометрика. - М: Ай Пи Ар Медиа, 2024. - 525 c.

4. Кун Т. Структура научных революций / Пер. с англ.; сост. В. Ю. Кузнецов. - М.: ООО "Издательство АСТ", 2002. - 608 с.

5. Хмелевская С.А. К вопросу об определении понятия "научная революция" / Социально-политические науки. 2017. No. 6. С. 7-10.

6. Орлов А.И. Революция в математических методах исследования / Заводская лаборатория. Диагностика материалов. 2024. Т.90. No..7. С. 5-7.

7. Орлов А.И. Основные черты новой парадигмы математической статистики // Научный журнал КубГАУ. 2013. No.90. С. 188-214.

8. Шапошников В. А. Признавал ли Кун революции в математике? / Вестник Московского университета. Серия 7: Философия. 2020. No. 3. С. 19-37.

9. Орлов А.И., Луценко Е.В. Системная нечёткая интервальная математика. Монография (научное издание). - Краснодар, КубГАУ. 2014. - 600 с.

10. Орлов А.И., Луценко Е.В. Анализ данных, информации и знаний в системной нечёткой интервальной математике: научная монография. - Краснодар: КубГАУ, 2022. - 405 с.

11. Орлов А.И. Развитие математических методов исследования (2006 - 2015 гг.) // Заводская лаборатория. Диагностика материалов. 2017. Т.83. No.1. Ч.1. С. 78-86.

12. Орлов А.И. Модель анализа совпадений при расчёте непараметрических ранговых статистик // Заводская лаборатория. Диагностика материалов. 2017. Т.83. No.11. С. 66-72.

13. Орлов А.И. Некоторые нерешённые вопросы в области математических методов исследования // Заводская лаборатория. Диагностика материалов. 2002. Т.68. No.3. С.52-56.

14. Шейнин О.Б. Статистика. Её история и суть // Финансы и бизнес. 2016. No. 4. С. 104-118.

15. Sheynin O. History of statistics. - Berlin : NG Verlag, 2012. - 221 p.

16. Большев Л.Н., Смирнов Н.В. Таблицы математической статистики. - М.: Наука, 1983.- 416 с.

17. Плошко Б. Г., Елисеева И. И. История статистики: учебное пособие. М.: Финансы и статистика, 1990. - 295 с.

18. Остроградский М.В. Об одном вопросе, касающемся вероятностей / Полное собрание трудов. Т.3. - Киев: Издательство Академии наук УССР, 1961. - С.215 - 237.

19. Орлов А.И. Создана единая статистическая ассоциация / Вестник Академии наук СССР. 1991. No.7. С. 152-153.

Публикация:

1311. Орлов А.И. Состояние и перспективы развития статистических методов в экономике // Научный журнал КубГАУ. 2025. - No.02(206). С. 217 - 232.

Все вышедшие выпуски доступны в Архиве рассылки по адресу subscribe.ru/catalog/science.humanity.econometrika.

*   *   *   *   *   *   *

Вокруг искусственного интеллекта складывается очень тревожная структура знаний и компетенций, - академик Новиков

Директор Института проблем управления РАН академик РАН Дмитрий Новиков рассказал, почему искусственные нейронные сети не используются в системах управления критически важными объектами и в чем состоит главная опасность нездорового ажиотажа вокруг искусственного интеллекта.

В последнее время звучит все больше разговоров о важности технологий искусственного интеллекта. Его применение считают чуть ли не главным трендом развития человечества. Интересно ваше мнение по этому вопросу как руководителя головной научной организации по системам управления. Когда искусственный интеллект станет управлять у нас всем?

Начнем с последнего вопроса - никогда в обозримом будущем. Я считаю, что искусственный интеллект является очень вредным термином, потому что для обывателей он создает иллюзию действительно чего-то сравнимого с человеком. Определений искусственного интеллекта есть тысячи, но, если взять какой-нибудь нормативный документ нашего правительства, программу по развитию искусственного интеллекта, то там будет сказано, что искусственный интеллект - это нечто, имитирующее деятельность человека. Определение очень туманное, и нет четких границ, что относить к искусственному интеллекту.

А что такое искусственный интеллект, по-вашему?

Можно сказать, что с точки зрения теории управления - это раздел математики. Традиционно есть несколько областей науки, как правило - методов прикладной математики, которые считают относящимися к искусственному интеллекту. Они возникли в разное время, и некоторые из них появились еще до 1956 года, когда этот термин возник. Те же столь безумно модные сейчас искусственные нейронные сети берут начало от математической модели искусственного нейрона Мак-Каллока-Питтса - а это 1943 год. Первая практическая реализация нейронной сети - это перцептрон Розенблатта (1957 год). Традиционно к методам искусственного интеллекта, помимо сетей, относят: нечеткие множества (которыми начали заниматься в 1965 году), эволюционные алгоритмы и экспертные системы (возникшие в 1960-70-е годы), мультиагентные системы (1974 год), различные логические средства и многое другое.

Периодически наблюдались всплески интереса к этим областям, но надо понимать, что это весьма эклектичная область знаний, развивающаяся скачками, и каждый из этих скачков сопровождается завышенными ожиданиями, которые сменяются разочарованиями. На протяжении почти 70-летней истории развития этой области таких скачков было несколько и еще много будет, но все это зачастую лишь "пена".

То есть нельзя сказать, что основная задача ИПУ РАН, как головной научной организации в области систем управления, состоит в скорейшем внедрении искусственного интеллекта в управление всем, чем только можно?

Сказать так было бы в принципе неправильно, хотя об искусственном интеллекте мы тоже не забываем. Если обратиться к истории, то в 1970 году вышла книга трех наших сотрудников - Айзермана, Бравермана и Розоноэра "Метод потенциальных функций в теории обучения машин". Это была первая в стране системная работа по распознаванию образов. А в 1974 году появилась книга наших сотрудников Вапника и Червоненкиса "Теория распознавания образов", получившая признание во всем мире - метод опорных векторов и размерность Вапника-Червоненкиса знает каждый студент. Недаром самый на сегодня мощный в России суперкомпьютер Яндекса называется "Червоненкис". То есть, как "Россия - родина слонов", так и Институт проблем управления РАН - родина искусственного интеллекта, как минимум в России. Поэтому, с одной стороны, мы искусственный интеллект, можно сказать, породили и успешно применяем его, где можно и нужно, но не надо вокруг этого поднимать столько шума и кричать, что наша задача состоит в его повсеместном внедрении. Это обывательская точка зрения, в которой есть определенный вред.

Что же вредного в том, что к научно-технической проблеме наблюдается повышенный интерес в обществе?

Понимаете, в теории управления всегда доминировал модельный подход, который подразумевает, что мы должны достаточно хорошо знать и понимать объект управления, чтобы им управлять. Альтернативой этому является безмодельный подход, частным случаем которого являются те же искусственные нейронные сети. Мы их обучаем, но каким образом при этом выстраиваются связи и как именно принимается сетью то или иное решение, мы не знаем.

Представьте, что у вас есть черный ящик, с одной стороны которого есть кнопка, а с другой - лампочка. Нажимаете на кнопку - загорается лампочка. Мы установили эту связь, но не знаем, что там внутри и почему это происходит, зажжется ли лампочка в следующий раз и не взорвется ли этот черный ящик после определенного числа нажатий на кнопку. С одной стороны, хорошо, что не надо забивать себе голову знаниями об объекте управления и тратить время на его изучение: установил связь между кнопочкой и лампочкой - и задача решена. Но есть у безмодельного подхода и минусы: мы не понимаем, что именно на самом деле происходит, а потому, в том числе, не можем гарантировать безопасного функционирования этого объекта. Именно поэтому один из текущих трендов - это разработка интерпретируемых моделей машинного обучения.

Почему искусственные нейронные сети не используются в системах управления критически важными объектами? Потому что никто не может гарантировать, что система управления не выведет этот объект за границы допустимой области. Именно поэтому нейронных сетей нет в авиации, на атомных станциях, во многих производственных системах. Проблема доверенного (объяснимого) искусственного интеллекта - это интересная научная задача с точки зрения математики и много кто ею занимается, но над ее решением еще работать и работать.

Но есть же области, где искусственный интеллект успешно работает.

Разумеется, искусственные нейронные сети успешно применяются во многих областях, в том числе и в наших разработках, но я говорю о вреде, который приносит ажиотаж, который создается вокруг этого термина. Самая главная здесь опасность - цивилизационно-образовательная. В самом деле, если у нас будет тотально принят безмодельный подход, то зачем нам изучать в школе физику, химию, биологию и даже математику. Вместо этого мы "настроим сетку", как говорит сейчас молодежь, и она сама во всем разберется. В результате в этой области складывается очень тревожная структура знаний и компетенций.

Мы недавно организовывали хакатон с одним из банков по решению задач использования искусственного интеллекта в сельском хозяйстве. Хакатон - это когда предлагается несколько задач, и соревнующиеся команды должны за заданное время решить их, после чего жюри по заранее определенным критериям определяет победителей. Когда мне коллеги рассказали о том, кто там победил, я был сначала очень удивлен, потому что в решении одной из задач победила команда, состоящая из двух старшеклассников и одного студента, при том, что команды были самые разные, начиная от школьников, заканчивая лицами, обремененными высокими учеными степенями. Казалось бы, профессор должен обыграть школьника в интеллектуальной задаче. Но это не всегда так.

Есть несколько порогов вхождения в предметную область, связанную с искусственным интеллектом (точнее - с искусственными нейронными сетями). Первый порог очень низкий. Это уровень пользователя компьютерных программ, для чего достаточно знаний в объеме старших классов физмат школы. Достаточно подобрать параметры и модифицировать программу на Python. Следующий порог, который тоже невысок, требует уровня знаний 2-3 курса инженерного или математического вуза: написать программу самому, подобрать (найти в Интернете) данные для машинного обучения. А следующий уровень - это уже глубокие, по-настоящему научные работы, дающие существенное повышение качества решений системы, включая доказательство теорем и тому подобное. На этот уровень выходит одна сотая процента, а все остальные так и толкутся на двух нижних "ремесленных" уровнях. Но при этом и у них, и у окружающих их обывателей создается иллюзия, что они делают науку и продвигают искусственный интеллект. И самое печальное, что эта же иллюзия создается не только у обывателей или журналистов, но и у тех, кто выделяет деньги на соответствующие исследования и определяет, чему нужно, а чему не нужно учить подрастающее поколение. И вот очень влиятельные люди уже заявляют, что нам не нужны математические школы или что в обычной школе не надо изучать физику. Вот что самое страшное.

Подготовил Леонид Ситник, редакция сайта РАН
https://new.ras.ru

*   *   *   *   *   *   *

"Мне за народ умереть хочется"

Аэлита Засимова, Пушкино, Московская обл.

В плеяде замечательных русских писателей-классиков стоит и имя Н.С. Лескова (1831-1895). Уроженец Орловской области, он воспел народ, красоту и необъятность просторов Русской земли. Долгое время писатель жил и в Киеве, полюбил украинский народ и немало трудился и творил здесь.

С приходом к власти укронацистов имя писателя, как и многих других его соратников по перу, было ошельмовано и забыто. Подорвана и дружба, культурное сотрудничество двух братских народов - русского и украинского. А варварский снос памятников, свидетельствующих об этом наследии, не прекращается и поныне.

Лесков, по выражению Горького, "ставил своей высшей целью служить Родине словом правды и истины", и потому его невозможно запретить или изъять из русской литературы. Все творчество писателя, яростного и честного, по отзывам его друзей, богатое и многообразное, хотя и не лишенное противоречий, вместе с тем являет собой пример удивительной художественной и эстетической цельности, яркой самобытности поэтических форм. Он создал своеобразный художественный мир и свой стиль изображения. Его видение действительности органически сочетало реализм и мечту, животворную связь с древнерусскими фольклорными и другими национально-историческими источниками. В его произведениях словно заново рождались и возникали многие известные области жизни, заставляя читателей вдруг оглянуться на весь Русский мир. А впечатления накапливал Лесков еще тогда, когда служил он чиновником Орловской уголовной палаты, перед ним раскрывались всевозможные жизненные драмы и вся подноготная пестрых людских судеб, в которых он принимал самое близкое участие. Встречаясь с людьми разных сословий, чинов и рангов, познавал он нравы русской провинции. Массу наблюдений почерпнул писатель, живя сначала в Киеве, затем в Пензе, Одессе, Пскове, Оренбурге и Риге, а также служа у своего дальнего родственника - мужа тетки англичанина Шкотта.

А началось его литературное творчество еще в 1860 году с публицистики. Словно спеша выплеснуть запас своих наблюдений и размышлений, передать пережитое волнение, он публикует свои статьи, очерки и фельетоны, близкие по духу настроениям демократов: "Демократия шестидесятников", "О рабочем классе", "Несколько слов о врачах рекрутских присутствий", "О найме рабочих людей", "О привилегиях", "О переселениях крестьян".

Глубокая вера и любовь к народу позволили ему увидеть и постигнуть не только его страдания от произвола чиновников, но и силу характера и духа, несгибаемую волю и веру в лучшее. Такие люди изображены в повестях "Соборяне", "Овцебык", "Запечатленный ангел", "Захудалый род", "Пугало", "Инженеры-бессребреники", "Кадетский монастырь".

"У нас не перевелись, да и не переведутся праведники" - так начинается рассказ "Кадетский монастырь" о многотрудной жизни воспитателей и наставников юных кадетов. Их глубоко мудрое отношение к воспитанию могло служить примером для педагогов, оно содействовало становлению духа товарищества, взаимопомощи и сострадания. С их утратой люди переставали быть людьми, становились холодными эгоистами, не способными ни к какому делу, требующему самоотверженности и доблести, кроме способности обогащаться. Разве не злободневно это звучит сегодня, в век капитализма, где в основу жизни положено лишь это безудержное обогащение, поклонение "золотому тельцу"?

Против этого выступает и другой герой повести - "Соборяне" - протопоп Туберозов, ведущий многострадальное житие в глубине России. Он горячо и преданно служит народу и Родине, порицает обывателей, живущих лишь для себя, утративших заботы о благе ближних и страны. Служитель православия не готов мириться и с раболепием, кротостью людей. Он весь под обаянием скромной, но великой силы тех, кто готов на подвиг и сопротивление злу. И грезит герой романа о каком-то новом, чудесном храме на Руси, где станет вольно дышаться детям и внукам. К храму чести, святости и добра устремлены и главные герои повести "Инженеры-бессребреники", выпускники инженерного училища Дмитрий Брянчанинов, его друг Михаил Чихачев и их сокурсник Николай Фермор. Последний - искатель правды и справедливости - был непонятым среди своих сверстников, стремящихся к веселью и кутежам, которые даже были не прочь "самовознаградиться", то есть брать взятки и давать откаты, когда будут готовы к самостоятельной жизни. Для Николая Фермора, честного и неподкупного во всем, такой путь не годится, хотя он и не аскет и пишет неплохие стихи, правда, воспевает в них не восторги любви или ножки Терпсихоры, а дух чести и неподкупности, служения правде. И в этом он опережает свое время. В повести писатель разоблачает и чиновников - казначеев, готовых конвертами брать взятки и при этом ханжески поучать: "Веруй, а не испытывай, верующему приложится, у испытующего отнимется". Но простые люди, страдающие и честные, ханжества лишены и до поры обладают скрытой, но сильной волей. Таков герой повести "Пугало" Селиван. Человек бедный, немало испытавший в жизни, приютивший больную несчастную девочку, не находил понимания среди граждан, живущих рядом: будучи "в тени мышления", одержимые предрассудками, они сочиняли всякие нелепые, страшные байки про Селивана, пока не убедились в его честности, доброте и бескорыстии. Глубоко познав беды и страдания народа и крепостное право не из книг, а лицом к лицу, всеми силами души Лесков его возненавидел. Появляются и рассказы из истории самовластных помещиков: "О горестных судьбах крепостных", "Житие одной бабы" (1863), позднее - "Тупейный художник" (1888), уголовные драмы "Леди Макбет Мценского уезда" (1865), "Расточитель" (1867). А в 1892 году в повести "Юдоль" он рисует ужасающие картины голода. Глубокая вера и любовь к народу позволили ему увидеть и постигнуть не только его страдания, силу характера и духа, но и талант, одаренность, удивительно непохожих друг на друга людей. Все они объединены одной, до поры скрытой, но неизменной думой о поиске правды, судьбах Родины. О счастье народа по-своему думал и философ Червев, и донкихот Рогозин в повести "Захудалый род". А Иван Северьяныч Флягин в другой повести - "Очарованный странник" - восклицает: "Очень мне за народ умереть хочется!" Сей странник, побывав в татарском плену, всю свою тоску, любовь к Родине изливает в своих речах. Необыкновенная жизнь его, скитания по городам и весям родной земли удивительно соответствуют деятельному, но мирному характеру героя. Ему присущи и сила духа, и богатырское озорство, и чрезмерность в увлечениях, чуждая умеренности и покорной смиренности добродетельного мещанина, отзывчивость к чужому горю. Но что непреодолимо влечет к этому человеку - очарование красотой. Оно в каждом слове его, восхищении всем прекрасным, чуждыми развращающему равнодушию мещанина.

Необычными талантами богат народ. Сказ о левше, подковавшем блоху, вскоре стал в России крылатым преданием, а сам герой - символом удивительного народного умельца. Он гибнет бессмысленно и безвестно. Не менее трагична судьба другого героя - тупейного художника Аркадия. Его житейская история, любовь к крепостной актрисе Любови Анисимовне, ужасающе страшная картина крепостничества, проникновенно оживлены в рассказе старой няньки, вспоминающей ужасные драмы своей молодости. А последние слова обращены к своему воспитаннику: "Никогда не выдавай простых людей. Ведь их надо беречь. Простые люди всегда страдают".

И хотя герои Лескова находились далеко от бурной жизни, они жили и действовали в глухомани, на краю земли, но это не значит, что сам писатель уходил от общественной жизни. Он остро переживал насущные нравственные проблемы и вместе с тем умел смотреть вперед, а не таить в себе бесплодное негодование на прошлое. В своем поиске правды писатель нередко и заблуждался. В 1864 году в романе "Некуда", долго и мучительно проходившем через рогатки цензуры, было немало здравых мыслей, трезвая оценка "базаровщины", защита многих добрых человеческих традиций, семейных и общественных. Он создал, наконец, характер благородного революционера Райнера, которого Горький сравнивал с Рахметовым, и обаятельный образ Лизы Бахаревой, с ее живым и цельным характером. Но в романе прозвучала мысль и о бесплодности революционных усилий, обличение "нигилистов", как тогда называли революционеров. Выход романа совпал с нелегким периодом революционных демократов, когда в 1862 году были заключены в Петропавловскую крепость Д. Писарев и Н. Чернышевский, жестоко подавлены польское восстание и волнения крестьян. Лесков был отвержен от демократических изданий, но за него заступился М. Горький: "Лесков получил удар в сердце, совершенно не заслуженный им... В душе этого человека странно соединялись уверенность и сомнения, идеализм и скептицизм... однако все усилия его мысли, вся страсть натуры были одухотворены желанием себя положить на пользу России и всей Вселенной". Позднее и сам Лесков с горечью признавал: "Большая ошибка была в желании остановить бурный порыв, который теперь представляется мне естественным явлением, я был молод и не подозревал в благородном консерватизме всей его подлости и себялюбия".

И все же писатель везде оставался самим собой. Благоговея перед Толстым и его нравственной верой в народ, он не принимал ни его непротивленчества, ни смирения перед патриархальным крестьянством. "Как художник слова, - писал Горький, - Н.С. Лесков вполне достоин стоять рядом с такими творцами литературы, каковы были Лев Толстой, Николай Гоголь, Иван Тургенев, Иван Гончаров. Силой таланта он им не уступал, а широтой охвата жизни, глубоким пониманием бытовых загадок ее, тонким знанием великорусского языка, нередко превышал названных предшественников и соратников своих".

Он был созвучен и с Чеховым, герои которого тоже горячо и страстно верили, что рано или поздно человечество увидит "жизнь светлую, прекрасную, изящную". Об этом мечтает Соня в финале пьесы "Дядя Ваня": "Мы услышим ангелов, мы увидим все небо в алмазах, мы увидим, как все зло земное, все наши страдания потонут... и наша жизнь станет тихой, нежной, сладкой, как ласка". Эта вера звучит и в словах одной из героинь Лескова - Лидии: "Характеры идут, характеры зреют, они впереди, и мы им в подметки не годимся. Они придут, придут. Придет весенний шум!"

История, современность и будущность всегда занимали пытливый ум писателя. "Лучшее время не позади нас. Это верно и принятия достойно" - писал он. А литераторы, общественные деятели давали Лескову такую оценку: "Он современен, потому что в художественном мире этого замечательного мастера слова раскрывается величие простых людей из народа. Он современен, потому что познал народ в его глубинных свойствах и историческом развитии, ощутив и корни древних традиций, и здоровые ростки будущего. Он современен, так как верил в добро, гуманность, умел любить свой народ и страну".

Писатель верил, что лучшие люди во имя лучшего будущего Родины всегда будут отдавать ей души и сердца ради ее спасения. Разве не с той же страстью и героизмом сражаются с фашизмом сегодня воины на Украине?

https://sovross.ru

*   *   *   *   *   *   *

На сайте "Высокие статистические технологии", расположенном по адресу http://orlovs.pp.ru, представлены:

На сайте есть форум, в котором вы можете задать вопросы профессору А.И.Орлову и получить на них ответ.

*   *   *   *   *   *   *

Удачи вам и счастья!


В избранное