1 студент магистратуры МГТУ им. Н.Э. Баумана, nastya.andreevna.2018@inbox.ru

2 ассистент кафедры "Экономика и организация производства" МГТУ им. Н.Э. Баумана, antorlov-mstu@mail.ru

3 профессор, доктор экономических и технических наук, профессор кафедры "Экономика и организация производства" МГТУ им. Н.Э. Баумана, prof-orlov@mail.ru

Аннотация. Разработана процедура определения и ранжирования ключевых показателей успеха (на примере предприятия "ДС-Групп"). Проведён анализ экспертных мнений специалистов предприятия о значимых конечных точках с использованием коэффициента конкордации Кендалла. Разработан и реализован метод нахождения медианы Кемени, позволяющей определить приоритетные направления развития предприятия. Полученные результаты демонстрируют высокую согласованность экспертных оценок, что свидетельствует о единой корпоративной культуре.

Ключевые слова: производственная система, предприятие, производство, экспертные оценки, интуиция, конечные точки, медиана Кемени, коэффициент конкордации Кендалла.

1 graduate student of Bauman Moscow State Technical University, nastya.andreevna.2018@inbox.ru

2 assistant of the Department of Economics and Organization of Production at Bauman Moscow State Technical University, antorlov-mstu@mail.ru

3 Professor, Doctor of Economics and Technical Sciences, Professor of the Department of Economics and Organization of Production at Bauman Moscow State Technical University, prof-orlov@mail.ru

Abstract. A procedure has been developed for determining and ranking key success indicators (using the example of the DS-Group enterprise). The analysis of the expert opinions of the company's specialists on significant endpoints using the Kendall concordance coefficient is carried out. A method for finding the Kemeni median has been developed and implemented, which makes it possible to determine the priority directions of the company's development. The results obtained demonstrate a high consistency of expert estimators, which indicates a unified corporate culture.

Key words: production system, enterprise, production, expert estimation, intuition, endpoints, Kemeny median, Kendall concordance coefficient.

В современных условиях высокой конкуренции и быстро меняющейся бизнес-среды промышленные предприятия сталкиваются с необходимостью принятия решений в условиях неопределённости и ограниченного времени. В таких ситуациях традиционные аналитические (расчётные) методы не всегда эффективны, что актуализирует поиск альтернативных подходов к управленческим решениям. Всё большее распространение получают экспертные методы сбора и анализа субъективных мнений специалистов, полученных интуитивным путём [1]. Методы принятия решений, основанных на использовании интуиции, проанализированы в [2]. Присущую специалистам интуицию можно и нужно развивать с целью повышения качества применяемых ими управленческих решений. Для этого разработан ряд технологий [3]. Методы сравнения технологий активации интуиции разработаны в [4].

Цель данной статьи - разработать подходы к определению ключевых показателей успеха промышленного предприятия и оценить эффективность методов активации интуиции для повышения результативности их достижения (на примере предприятия "ДС-Групп").

Для достижения цели необходимо решить следующие задачи:

1) разработать методы идентификации и систематизации ключевых показателей успеха (конечных точек) предприятия на основе экспертных оценок;

2) создать систему ранжирования и взвешенной оценки значимости выявленных показателей с применением статистических методов согласования мнений экспертов;

3) разработать методы расчёта медианы Кемени для получения итогового согласованного ранжирования конечных точек;

4) сформировать экспериментальную и контрольную группы сотрудников с использованием подхода стратифицированной рандомизации;

5) разработать и провести программу тренингов по активации интуиции для экспериментальной группы;

6) провести сравнительный анализ изменений в достижении конечных точек между экспериментальной и контрольной группами;

7) выполнить статистическую оценку эффективности применения методов активации интуиции с использованием критерия Вилкоксона проверки однородности двух независимых выборок;

8) предложить практические рекомендации по внедрению эффективных методов активации интуиции в деятельность предприятия "ДС-Групп".

Практическая значимость исследования заключается в эмпирической проверке эффективности методов активации интуиции в корпоративной среде, что вносит вклад в теорию принятия решений и управления персоналом.

Вид деятельности - разработка проектной документации для различных новых и модернизируемых систем, поставка, монтаж и наладка оборудования, сборка и программирования систем автоматизации технологического процесса.

Основные цели предприятия: увеличение количества заказов и повышение качества и количества предоставляемых услуг. Задачи предприятия: увеличение количества специалистов в области АСУТП, снижение издержек, уменьшение количества ошибок среди сотрудников в рабочих процессах.

Среди выполненных предприятием проектов: АСУТП люберецких очистных сооружений, системы промышленных вентиляций на теннисных кортах в Лужниках, АСУТП складов ГХН на западной станции водоподготовки, модернизация АСУТП на восточной станции водоподготовки и др. Ключевым клиентом предприятия ООО "ДС-Групп" является АО "Мосводоканал" - крупнейшая водная компания в России.

Производственные мощности: предприятие располагает собственным производственным участком площадью 850 кв. м., оснащённым современным оборудованием для сборки и программирования систем автоматизации. Производственная мощность составляет до 200 систем автоматизации малых и средних объектов в месяц.

Устойчивое финансовое положение предприятия подтверждается ростом основных экономических показателей: за период 2020-2023 гг. выручка увеличилась на 78%, а численность персонала возросла в 2,1 раза, что свидетельствует об активном развитии компании и расширении сферы деятельности.

Основные цели предприятия: увеличение количества заказов и повышение качества и количества предоставляемых услуг. Задачи предприятия: увеличение количества специалистов в области АСУТП, снижение издержек, уменьшение количества ошибок среди сотрудников в рабочих процессах.

Опишем процедуру сбора и анализа экспертных оценок, которая была использована в исследовании. Она включает этапы формирования экспертной комиссии, сбора индивидуальных оценок, их кластеризации и согласования с использованием медианы Кемени.

Для проведения исследования была сформирована экспертная комиссия из сотрудников компании "ДС-Групп". Основные критерии отбора экспертов [1]:

1. Компетентность в области автоматизации технических систем.

2. Опыт работы в компании не менее 3 лет.

3. Представительство различных подразделений компании.

Сбор данных осуществлялся в два этапа:

1. Первичный опрос: экспертам было предложено сформулировать 5-6 ключевых показателей успеха (конечных точек согласно [4]), которые они считают важными для достижения целей предприятия. Ответы собирались в свободной форме.

2. Вторичный опрос: после систематизации ответов экспертов был составлен список из 15 обобщённых конечных точек. Экспертам было предложено ранжировать конечные точки по степени их важности и распределить 100 баллов между конечными точками, отражая их относительную значимость.

Для обработки собранных данных была применена процедура кластеризации, которая включала следующие этапы:

1. Группировка схожих показателей: показатели, имеющие схожий смысл (например, "Финансовое благополучие компании" и "Рентабельность проектов"), были объединены в группы.

2. Определение центроидов кластеров: для каждого кластера был вычислен центр (центроид), представляющий среднее значение всех показателей внутри кластера.

3. Проверка согласованности внутри кластеров: для оценки согласованности мнений экспертов внутри каждого кластера использовались коэффициенты ранговой корреляции Спирмена и Кендалла [5, 6].

В качестве коллективного мнения комиссии экспертов была использована медиана Кемени. Её получают методом агрегирования индивидуальных ранжировок в единую коллективную ранжировку, для которой минимально суммарное расстояние до всех индивидуальных ранжировок [7].

Алгоритм применения медианы Кемени включал следующие этапы:

1. Построение матрицы попарных сравнений для каждого эксперта.

2. Суммирование индивидуальных матриц для получения групповой матрицы предпочтений.

3. Поиск итогового ранжирования, минимизирующего суммарное расстояние до всех индивидуальных ранжировок.

Для расчёта медианы Кемени был использован программный пакет MATLAB R2023b с собственным скриптом, реализующим алгоритм ветвей и границ. Выбор MATLAB обусловлен его эффективными возможностями для работы с матрицами и решения оптимизационных задач, что критически важно при поиске медианы Кемени, поскольку данная задача является NP-трудной.

Выбранная процедура сбора и анализа экспертных оценок обладает следующими преимуществами:

1. Гибкость: позволяет учитывать широкий спектр мнений экспертов.

2. Анонимность: исключает влияние авторитетных мнений на результаты.

3. Структурированность: использование кластеризации и медианы Кемени обеспечивает объективность итоговых результатов.

4. Простота интерпретации: Итоговое ранжирование легко интерпретируется руководством компании для принятия решений.

В данном разделе представлена процедура исследования результативности методов активации интуиции (для решения задач предприятия "ДС-Групп"). Она включает формирование выборки, определение конечных точек, их ранжирование и взвешивание, а также описание проведённых тренингов.

Формирование выборки. Целью формирования выборки является обеспечение репрезентативности данных для оценки эффективности методов активации интуиции [4]. Выборка должна включать сотрудников компании "ДС-Групп", представляющих различные категории специалистов, чтобы результаты исследования можно было обобщить на всю организацию.

Для проведения исследования была сформирована выборка из сотрудников компании "ДС-Групп" со следующими характеристиками:

1. Целевая аудитория: сотрудники компании "ДС-Групп", работающие в различных подразделениях (инженеры, руководители проектов, технические специалисты).

2. Размер выборки: 20 человек, разделённых на две группы:

∙Экспериментальная группа (10 человек): участвует в тренингах по активации интуиции.

∙Контрольная группа (10 человек): не участвует в тренингах, продолжает работать в обычных условиях.

Тип исследования: рандомизированное контролируемое испытание с экспериментальной и контрольной группами.

Для формирования выборки была использована стратифицированная рандомизация с блоковым методом:

1. Стратификация по ключевым параметрам.

Каждый сотрудник был классифицирован по следующим характеристикам:

∙Пол (мужской/женский).

∙Возраст (до 30 лет / 30-45 лет / старше 45 лет).

∙Должностной уровень (руководители / специалисты / технический персонал).

∙Стаж работы в компании (до 3 лет / более 3 лет).

∙Образование (высшее техническое / высшее гуманитарное / среднее специальное).

2. Процедура блоковой рандомизации.

Участники были разделены на блоки по 4 человека. Это позволяет обеспечить равномерное распределение характеристик между экспериментальной и контрольной группами.

В каждом блоке использовался генератор случайных чисел для распределения участников: AABB или ABBA (где A - экспериментальная группа, B - контрольная группа). Следует пояснить, что последовательности AABB и ABBA были выбраны намеренно, поскольку они обеспечивают сбалансированную блочную рандомизацию, которая имеет ряд преимуществ:

∙Снижение временных эффектов: последовательности AABB и ABBA обеспечивают равномерное распределение экспериментальных и контрольных условий во времени, что минимизирует влияние временных трендов.

∙Контроль эффекта переноса: при использовании последовательности ABBA (в отличие от BABA) обеспечивается симметричный дизайн, что позволяет лучше контролировать эффекты переноса между условиями.

Последовательности типа BABA не использовались, поскольку они могут создавать систематическую погрешность из-за частой смены условий эксперимента, что потенциально увеличивает эффект интерференции между экспериментальными воздействиями.

После завершения рандомизации была проведена проверка сбалансированности групп по ключевым параметрам, т.е. сравнение распределения пола, возраста, должностей и стажа между группами. Установлено, что статистически значимых различий между группами нет.

Обоснование выбора метода:

1. Репрезентативность: Стратификация позволяет учитывать разнообразие характеристик сотрудников и минимизировать влияние случайных факторов.

2. Сравнимость групп: Рандомизация обеспечивает сопоставимость экспериментальной и контрольной групп.

3. Эффективность: Блоковый метод упрощает процесс распределения участников и гарантирует равномерное представительство.

Формирование выборки было проведено с соблюдением всех требований к научным исследованиям [1]. Полученные группы обеспечивают возможность объективного сравнения результатов между участниками тренингов и сотрудниками, работающими в обычных условиях.

Определение конечных точек. Конечные точки (endpoints) - это измеримые критерии успеха, используемые для оценки эффективности методов активации интуиции. Процедура их определения включала три этапа, которые рассмотрены далее.

1. Первичный опрос экспертов.

Цель: выявление индивидуальных показателей успеха, значимых для сотрудников предприятия.

Метод: анкетирование 20 экспертов (руководителей, инженеров, техников) с открытыми вопросами.

Для определения конечных точек был проведён первичный опрос всех участников исследования, который включал следующие этапы:

1.1. Каждому участнику было предложено сформулировать 5-6 конкретных показателей, достижений или ситуаций, которые он считает успехом в контексте работы компании.

1.2. Для каждого из указанных показателей участники оценивали его важность по 10-балльной шкале (где 1 - совсем не важен, 10 - крайне важен).

1.3. Также участники указывали факторы, которые, по их мнению, мешают достижению указанных показателей успеха.

Примеры ответов участников приведены в табл.1.

2 Систематизация ответов на основе применения алгоритма группировки схожих по смыслу ответов:

2.1. Сбор 112 индивидуальных показателей от экспертов.

2.2. Объединение в смысловые группы (кластеры) методом иерархической кластеризации:

В качестве расстояния между кластерами использовался коэффициент сходства Жаккара. Это расстояние между множествами выведено из некоторой системы аксиом в статье [8] (см. также [9, разд. 1.8]). Затем проводилась визуализация дендрограммы для определения оптимального числа кластеров.

Результат: выделено 15 обобщённых конечных точек, представленных в табл. 2.

Формирование матрицы значимости. После кластеризации индивидуальных показателей успеха, предложенных экспертами, формируется матрица значимости - инструмент количественной оценки важности конечных точек.

Этап 1: сбор исходных данных. Процедура включает:

1. Фиксацию частоты упоминаний каждого показателя: для каждой конечной точки подсчитывается, сколько экспертов включили её в свой список.

2. Расчёт средней оценки важности по 10-бальной шкале: для каждого показателя вычисляется среднее арифметическое оценок, данных экспертами.

Этап 2: расчёт индекса важности (значимости). Индекс важности i-й конечной точки равен числу упоминаний этой точки, умноженному на среднюю арифметическую оценок важности и делённому на число экспертов. Число упоминаний точки - это количество экспертов, назвавших эту точку. Общее число экспертов - 20 человек. Результаты приведены в табл. 3.

На основе ранжирования выделяются три категории конечных точек:

∙Высокий индекс важности (>5,0): критические показатели, требующие приоритетного внимания.

∙Средний индекс важности (2,0-5,0): значимые, но не первостепенные показатели.

∙Низкий индекс важности (<2,0): показатели с относительно низкой значимостью.

Анализ матрицы значимости показывает четкую дифференциацию конечных точек по их важности для предприятия "ДС-ГРУПП":

1. Ключевые приоритеты (индекс > 5,0):

∙Финансовое благополучие компании (8,25)

∙Технологическое лидерство (6,85)

∙Качество и надежность продукции (6,45)

∙Профессиональное развитие сотрудников (5,40)

2. Вторичные приоритеты (индекс 2,0-5,0):

∙Оптимизация производственных процессов (3,95)

∙Расширение клиентской базы (3,80)

∙Информационная безопасность (3,80)

∙Комфортные условия труда (2,60)

∙Достойная оплата труда (2,55)

3. Дополнительные факторы (индекс < 2,0):

∙Благоприятный психологический климат (1,95)

∙Карьерный рост (1,85)

∙Снижение зависимости от импорта (1,75)

∙Отсутствие претензий от контролирующих органов (1,45)

∙Баланс работа-личная жизнь (1,30)

∙Признание профессиональным сообществом (1,05)

Такое ранжирование имеет практическую ценность для руководства компании при распределении ресурсов и разработке стратегических программ развития, позволяя сосредоточиться на наиболее значимых для сотрудников аспектах деятельности.

Ранжирование и взвешивание конечных точек. Для определения относительной значимости выявленных конечных точек предприятия "ДС-Групп" был проведён вторичный опрос экспертов. Экспертам (n = 20) было предложено выполнить две задачи:

1. Ранжирование - расположить 15 конечных точек в порядке их важности от 1 (наиболее важная) до 15 (наименее важная).

2. Распределение баллов - распределить 100 баллов между всеми конечными точками пропорционально их значимости для предприятия.

Данный подход позволяет получить как порядковые данные (ранги), так и метрические (баллы), что обеспечивает более точную оценку относительной важности показателей.

Для проведения опроса была разработана специальная анкета, включающая полный список из 15 конечных точек с описаниями; столбец для указания ранга (от 1 до 15), столбец для распределения баллов (в сумме 100). Для экспертов была составлена инструкция по заполнению анкет.

Для определения степени согласованности мнений экспертов был рассчитан коэффициент конкордации Кендалла [5, 6]. Коэффициент конкордации оказался равным 0,9311.

Для проверки статистической значимости коэффициента конкордации используется критерий хи-квадрат (χ²). Для полученных в ходе данного исследования данных χ² = 260.4.

Для определения статистической значимости полученного значения необходимо сравнить его с критическим значением для заданного уровня значимости α = 0.01 и числа степеней свободы: df = 15 - 1 = 14. Для рассматриваемого случая критическое значение равно 29.14 (табличное значение согласно [6]). Так как рассчитанное значение критерия (260.4) значительно превышает критическое значение (29.14), то нулевая гипотеза об отсутствии согласованности мнений экспертов отвергается. Коэффициент конкордации Кендалла W = 0.93 является статистически значимым на уровне α = 0.01.

Интерпретация результатов. Полученный коэффициент конкордации Кендалла W = 0.93 и подтверждение его статистической значимости позволяют сделать ряд важных выводов о согласованности мнений экспертов и надёжности результатов ранжирования. Основные выводы данного раздела таковы.

1. Уровень согласованности: значение W = 0.93 свидетельствует об очень высокой согласованности мнений экспертов предприятия "ДС-Групп" относительно важности различных конечных точек (согласно шкале Чеддока [10]).

2. Достоверность ранжирования: высокий коэффициент конкордации указывает на то, что полученное ранжирование конечных точек отражает коллективное мнение экспертов, а не является результатом случайных факторов.

3. Организационная культура: такая высокая согласованность может свидетельствовать о наличии единой корпоративной культуры и общего понимания приоритетов компании среди экспертов.

4. Приоритетные направления: анализ сумм рангов показывает, что эксперты единодушно признают первостепенную важность:

- финансового благополучия компании;

- технологического лидерства;

- качества и надёжности продукции.

Второстепенные направления: с высокой степенью согласованности эксперты относят к наименее важным точкам:

- снижение зависимости от импортных комплектующих;

- признание достижений профессиональным сообществом;

- отсутствие претензий от контролирующих органов.

Практическое значение полученных результатов:

1. Принятие управленческих решений: результаты можно использовать в качестве обоснованной базы для распределения ресурсов, разработки стратегии компании и формирования системы KPI.

2. Планирование развития: компания может сосредоточить усилия на развитии направлений, получивших наивысшие приоритеты, с уверенностью, что эти приоритеты отражают согласованное мнение экспертной группы.

3. Организационные изменения: выявленные приоритеты могут служить основой для реорганизации структуры предприятия и оптимизации бизнес-процессов.

4. Система мотивации: результаты ранжирования можно интегрировать в систему вознаграждения сотрудников, стимулируя достижение целей, признанных наиболее важными.

Ограничения исследования:

1. Изменение приоритетов: следует учитывать, что приоритеты могут изменяться с течением времени, особенно в условиях быстро меняющейся внешней среды.

2. Состав экспертной группы: результаты отражают мнение конкретной группы экспертов и могут отличаться при изменении состава экспертной комиссии.

Полученное значение коэффициента конкордации W = 0.93 согласно шкале оценки корреляционных связей характеризует очень высокую согласованность мнений экспертов [10]. Это делает их ценным инструментом для стратегического планирования деятельности предприятия "ДС-Групп".

Нахождение медианы Кемени

После подтверждения высокой согласованности мнений экспертов был произведён расчёт медианы Кемени для определения итогового ранжирования конечных точек.

Поскольку задача нахождения медианы Кемени является NP-трудной, для ее решения был использован алгоритм ветвей и границ, реализованный в программном пакете MATLAB R2023b. Программа последовательно строила возможные ранжирования и отсекала неперспективные ветви, если их штраф (расстояние) превышал уже найденное лучшее решение.

В процессе решения задачи алгоритм исследовал 42 810 807 возможных частичных ранжировок. Из них только 51 были доведены до полных перестановок. Время выполнения расчётов составило 311,15 секунд (около 5.2 минут). Эффективность алгоритма подтверждается тем, что из 15! ≈ 1.3 триллиона возможных перестановок, алгоритм проверил полностью только 51, что стало возможным благодаря эффективному механизму отсечения неперспективных ветвей.

В результате была найдена медиана Кемени. Полученная ранжировка конечных точек (итоговое мнение комиссии экспертов) представлена в табл. 7.

Медиана Кемени - одно из центральных понятий нечисловой статистики (статистики объектов нечисловой природы, статистики нечисловых данных) [9] и современной теории экспертных оценок [1]. Разработанный в ходе описанного в статье исследования алгоритм нахождения медианы Кемени может найти широкое применение в научных и прикладных исследованиях, а также использоваться в учебном процессе.

Анализ полученного ранжирования позволяет сделать следующие выводы:

1. Приоритетные направления: Полученный порядок подтверждает выявленные ранее приоритеты компании. Финансовое благополучие, технологическое лидерство, качество продукции и профессиональное развитие сотрудников занимают первые четыре позиции, что согласуется с ранее рассчитанным коэффициентом конкордации Кендалла.

2. Средний приоритет: Конечные точки со средним приоритетом (ранги 5-9) включают расширение клиентской базы, оптимизацию процессов, условия труда и информационную безопасность, что отражает тактические цели предприятия.

3. Низший приоритет: наименее важными признаны конечные точки, связанные с внешним признанием (ранг 14) и импортозамещением (ранг 15). Это что может указывать на более практический, ориентированный на внутренние потребности подход компании ДС-Групп.

4. Согласованность с ранее полученными результатами: Высокое значение коэффициента конкордации Кендалла (W = 0.93) нашло отражение в чёткой структуре итогового ранжирования без существенных противоречий между различными методами оценки.

Полученное ранжирование представляет собой надёжную основу для установления весовых коэффициентов значимости конечных точек, которые могут быть использованы при разработке системы комплексной оценки эффективности деятельности предприятия "ДС-Групп".

В ходе выполнения данной научно-исследовательской работы, продолжающей исследование [11], была разработана и частично реализована процедура исследования эффективности интуитивных методов принятия решений в корпоративной среде.

1. Разработан комплексный метод экспертного оценивания. Создана система сбора и анализа экспертных мнений, включающая формирование репрезентативной выборки из сотрудников предприятия с использованием стратифицированной рандомизации и блокового метода распределения на экспериментальную и контрольную группы.

2. Идентифицированы ключевые показатели успеха предприятия. На основе первичного опроса экспертов выявлены и систематизированы 15 обобщённых конечных точек, отражающих приоритеты развития компании "ДС-Групп". Сформирована матрица значимости с расчётом интегральных индексов важности для каждого показателя.

3. Получено согласованное ранжирование приоритетов (конечных точек). Применение коэффициента конкордации Кендалла продемонстрировало очень высокую согласованность экспертных мнений (W = 0,93), что свидетельствует о единой корпоративной культуре и общем понимании стратегических целей предприятия.

4. Предложен метод нахождения Кемени. Разработан и программно реализован в MATLAB R2023b алгоритм поиска медианы Кемени с использованием метода ветвей и границ. Получено оптимальное итоговое ранжирование конечных точек с минимальным суммарным расстоянием до всех индивидуальных экспертных оценок.

5. Выявлены приоритетные направления развития компании "ДС-Групп". Установлено, что ключевыми приоритетами предприятия являются: финансовое благополучие компании, технологическое лидерство, качество и надёжность продукции, профессиональное развитие сотрудников.

Научная и практическая значимость: разработанная процедура определения и ранжирования ключевых показателей успеха может быть адаптирована и применена на других предприятиях технического профиля. Высокий коэффициент конкордации подтверждает надёжность полученных результатов и их пригодность для стратегического планирования.

Полученное ранжирование представляет собой обоснованную основу для распределения ресурсов, разработки системы KPI и формирования программ развития предприятия "ДС-Групп".

Ограничения и направления дальнейших исследований: данное исследование ограничивается этапом определения и ранжирования конечных точек. Для полной реализации поставленной цели необходимо:

1. Провести серию тренингов по активации интуиции для экспериментальной группы с применением методов синектики, ТРИЗ и деятельностных игр.

2. Осуществить повторную оценку достижения конечных точек участниками обеих групп после завершения тренингов.

3. Выполнить статистический анализ различий между экспериментальной и контрольной группами с применением критерия Вилкоксона.

4. Провести взвешенный анализ результатов с учётом установленной значимости конечных точек.

5. Сформулировать практические рекомендации по внедрению методов активации интуиции в деятельность предприятия.

Выполненная часть исследования создаёт надёжную методологическую основу для завершения экспериментальной работы и получения окончательных выводов об эффективности методов активации интуиции в корпоративной среде (на примере предприятия "ДС-Групп").

1. Орлов А.И. Организационно-экономическое моделирование: учебник: в 3 частях. Часть 2: Экспертные оценки. М.: Изд-во МГТУ им. Н. Э. Баумана, 2011. 486 с.

11. Орлов А.И., Чернявская А.Ю. Методы идентификации и ранжирования ключевых показателей успеха предприятия (на примере "ДС-Групп") // Контроллинг в экономике, организации производства и управлении: сборник научных трудов XIV международного конгресса по контроллингу (Коломна, 24 мая 2025 г.). М.: НП "Объединение контроллеров", 2025. С.148-154.

Публикация:

1323. Чернявская А.Ю., Орлов А.А., Орлов А.И. Методы активации интуиции для решения задач управления промышленным предприятием // Пятнадцатые Чарновские Чтения. Сборник трудов XV Всероссийской научной конференции по организации производства. Москва, 5 декабря 2025 г. - М.: МГТУ им. Н. Э. Баумана, НП "Объединение контроллеров", 2025. - С. 642- 655.