Отправляет email-рассылки с помощью сервиса Sendsay

Эконометрика

  Все выпуски  

Эконометрика - выпуск 137


Информационный Канал Subscribe.Ru

Здравствуйте, уважаемые подписчики!

*   *   *   *   *   *   *

   В настоящее время эконометрика еще мало известна среди российских инженеров, менеджеров, экономистов. Поэтому представляется полезным введение элементов эконометрики в учебные курсы близкой тематики.

   Продолжаем публиковать материалы программы "Топ-менеджер" Академии Народного Хозяйства при Правительстве Российской Федерации. Слушателями этой программы являются "первые лица" предприятий, организаций, государственных учреждений (прежде всего директора и их заместители).

   В настоящий, 137-й выпуск рассылки "Эконометрика" от 28 июля 2003 года включены программа, раздаточный материал и тест для проверки знаний по курсу "Риск-менеджмент компании".

   Помещаем также материалы Межотраслевого института повышения квалификации Московского государственного технического университета им. Н.Э.Баумана (МИПК МГТУ им. Н.Э.Баумана). Как и слушатели программы "Топ-менеджер" Академии Народного Хозяйства при Правительстве Российской Федерации, слушатели факультета повышения квалификации "Инженерный бизнес и менеджмент" (ФПК ИБМ) получают академическую степень "Мастер делового администрирования" (МВ А) либо (при учебной программе с меньшим количеством часов) документ о повышении квалификации.

   В настоящий выпуск рассылки включены материалы по курсу "Прогнозирование в маркетинге".

   Все вышедшие выпуски Вы можете посмотреть в Архиве рассылки по адресу http://www.subscribe.ru/archive/science.humanity.econometrika.

   С июля по сентябрь 2003 года рассылка "Эконометрика" будет выходить с периодичностью один раз в две недели.

*   *   *   *   *   *   *

Академия Народного Хозяйства при Правительстве Российской Федерации

Программа "Топ-Менеджер"

Риск-менеджмент компании

Преподаватель - профессор, д.т.н. А.И.Орлов

   Цель курса - знакомство с основами современной теории риск-менеджмента компании, с понятиями, подходами, методами и моделями, ориентированными на решение конкретных задач в области менеджмента и экономики. Задачи курса - приобретение основных знаний, умений и навыков описания и анализа внутренних и внешних рисков организации, оптимизации управления в ситуациях риска; освоение основных экономико-математических подходов к моделированию задач принятия решений в условиях неопределенности (риска); знакомство с рядом конкретных методов и приемов риск-менеджмента.

Программа

1. Научный подход к оценке, анализу и управлению риском.

   Жизнь в мире риска. Личные риски. Производственные риски (внутренние риски предприятия) - технологические, управленческие, риски персонала. Коммерческие риски. Финансовые риски. Риски, возникающие на уровне государства и Земли в целом.

2. Описание неопределенностей и характеристики риска

   Различные методы описания неопределенностей и рисков: вероятностно-статистическое, лингвистическое, на основе теории нечеткости, интервальное. Характеристики случайного ущерба (функция распределения, математическое ожидание, квантили, дисперсия, среднее квадратическое отклонение, коэффициент вариации, функция потерь). Доверительные интервалы для оценки характеристик риска.

3. Примеры оценки, анализа и оптимизации рисков

   Оценка, анализ и оптимизация рисков при продаже скоропортящихся товаров ("задача продавца газет"). Подходы к формированию портфеля ценных бумаг. Риски при реорганизации ремонтных служб корпорации. Как выбрать место проведения "Дня города"? Какую марку мотоцикла выпускать? Различные подходы к принятию решения в условиях риска.

4. Основные понятия теории риска

   Нулевой и приемлемый риски. Краткосрочные потери. Долгосрочные потери. Денежные потери и безвозвратные потери. Оценка риска. Плата за риск Диверсификация и страхование. Практические трудности при оценивании рисков. Средняя ожидаемая продолжительность предстоящей жизни (СОППЖ) как универсальная характеристика риска. Модель управления риском. Математические постановки задач управления риском. Многокритериальность.

5. Внутренние риски предприятия

   Технологические риски. Постоянный риск. Профессиональные вредности. Аварийный риск. Управление качеством продукции. Выборочный контроль Риск поставщика и риск потребителя. Контрольные карты - риск излишней наладки и риск незамеченной разладки. Оценка и контроль надежности. Планирование экстремального эксперимента. Инженерный риск при разработке новых проектов. Управленческие риски. Делегирование полномочий и делократия. Риски персонала.

6. Экологические риски

   Экология и экономика. Природные экологические риски. Техногенные экологические риски. Организационно-экономический механизм управления экологической безопасностью и рациональным природопользованием. Экологическое страхование.

7. Внешние риски предприятия

   Риски потребителей. Риски партнеров. Риски конкурентов. Риски местной и региональной власти. Риски общества. Риски инфляции. Риски валютных курсов и решений на уровне страны. Внешнеэкономические риски.

8. Структуризация и агрегирование рисков

   Диаграммы следствий. Диаграммы причин ("рыбий скелет", диаграмма Исикава). Методы построения обобщенных показателей. Рейтинги и прогностические индексы. Экспертно-статистический метод и уничтожение химического оружия.

9. Математические методы и модели в теории риска

   Статистические методы принятия решений в условиях риска. Лемма Неймана-Пирсона. Методы классификации (диагностики). Построение процедур принятия решений на основе непараметрических оценок плотностей. Модель оценки вероятности выполнения проекта на основе декомпозиции рисков. Модель оценки погрешности чистой текущей стоимости на основе погрешности коэффициентов дисконтирования. Методы и модели на основе теории нечетких множеств.

No. п/п

Тема

Количество часов

1

Научный подход к оценке, анализу и управлению риском

2

2

Описание неопределенностей и характеристики риска

2

3

Примеры оценки, анализа и оптимизации рисков

4

4

Основные понятия теории риска

2

5

Внутренние риски предприятия

4

6

Экологические риски

2

7

Внешние риски предприятия

2

8

Структуризация и агрегирование рисков

2

9

Математические методы и модели в теории риска

4

 

Всего

24

Литература

   1. Балабанов И.Т. Риск-менеджмент. - М.: Финансы и статистика, 1996. - 192 с.

   2. Гвозденко А.А. Основы страхования. - М.: Финансы и статистика, 1998. - 304 с.

   3. Менеджмент. Учебное пособие под ред. Ж.В.Прокофьевой. - М.: Знание, 2000. - 288 с.

   4. Орлов А.И. Эконометрика. - М.: Экзамен, 2002. - 576 с.

   5. Орлов А.И., Федосеев В.Н. Менеджмент в техносфере. - М.: Академия, 2003. - 400 с.

   6. Первозванский А.А., Первозванская А.Н. Финансовый рынок: расчет и риск. - М.: Инфра-М, 1994

   7. Пиндайк Р., Рубинфельд Д. Микроэкономика. - М.: Экономика - Дело, 1992. - 510 с.

   8. Чернов В.А. Анализ коммерческого риска. - М.: Финансы и статистика, 1998. - 128 с.

   9. Экология. Учебное пособие под редакцией С.А. Боголюбова. - М.: Знание, 1999. - 288 с.

*   *   *   *   *   *   *

Академия Народного Хозяйства при Правительстве Российской Федерации

Риск-менеджмент компании

Раздаточные материалы к курсу профессора А.И.Орлова

1. Различные виды рисков

   Будущее нам неизвестно. А потому неизвестны и будущие доходы и расходы, мы можем лишь прогнозировать их с той или иной степенью уверенности. Как описывать неопределенность будущего? Чем мы рискуем и что вообще понимать под "риском"? Как отражается неопределенность будущего на финансовых потоках (потоках платежей и поступлений), их характеристиках и выводах об эффективности управляющих воздействий на те или иные экономические процессы и других решениях? Как уменьшить возможные потери и защититься от рисков?

   Чтобы управлять рисками, надо сначала знать риски. Поскольку на деятельность любой организации непосредственно либо потенциально влияют риски различной природы, необходима классификация рисков. Возможно, для различных целей понадобятся различные классификации, основанные на различных методологических принципах.

   Для построения такой классификации необходимо какой-либо упорядочивающий принцип. Возьмем за основу движение от частного к общему. Тогда естественно выделить:

   производственные риски (внутренние риски), связанные непосредственно с деятельностью предприятия;

   коммерческие риски, вызванные неполной предсказуемостью динамики рынка, т.е. действий потребителей и конкурентов;

   финансовые риски, определяемые макроэкономической ситуацией;

   риски, возникающие на уровне государства и Земли в целом.

   Затем необходимо изучить степень их влияния на показатели эффективности деятельности организации с целью выделения наиболее значимых.

   После этого целесообразно провести изучение различных способов оценки финансовых и иных рисков в случаях, когда они моделируются с помощью тех или иных математических структур. В частности, распространено моделирование рисков с помощью вероятностей и случайных величин. При этом используются такие характеристики случайной величины, как математическое ожидание, дисперсия, квантили, коэффициент вариации, линейные комбинации математического ожидания и среднего квадратического отклонения и др. Подчеркнем, что эти характеристики следует рассматривать в непараметрической постановке, поскольку нет никаких оснований предполагать, что распределение характеристики риска входит в то или иное из известных параметрических семейств.

   Перспективной представляется разработка методов описания рисков с помощью теории нечетких множеств, лингвистических переменных, качественных признаков, интервальных математических и эконометрических моделей и др.

   Существенно, что описание может быть многомерным. Например, каждая координата может соответствовать своему виду воздействия (нарушения, происшествия) и описываться количественным либо качественным признаком. Тогда дополнительно возникает задача агрегирования (сведения вместе) показателей риска. Для агрегирования могут быть использованы различные методы, разработанные в теории оценки технического уровня и в теории экспертных оценок.

   Следующий этап - разработка методологии применения различных методов управления рисками с использованием экспертных оценок, современных методов прогнозирования, эконометрических и экономико-математических моделей с целью повышения эффективности деятельности организации в условиях риска. При этом необходимо научиться практически решать проблему многокритериальности (согласования оценок рисков, полученных по различным основаниям, с целью эффективного управления риском).

   К настоящему времени накоплена огромная литература по вопросам риска, как общая, например, теория статистического риска, так и по отдельным вопросам - по экологическим рискам, статистическим методам обеспечения качества, финансовым рискам и др.

   Производственные риски. К ним можно прежде всего отнести риски, связанные с выпуском дефектной продукции. Хорошо известно, что при массовом производстве невозможно обеспечить выпуск продукции без дефектов. Поэтому действуют отделы технического контроля (ОТК), службы (бюро) качества и другие подразделения, осуществляющие контроль качества продукции. Известно, что в машиностроении стоимость контрольных операций составляет в среднем около 10% от стоимости продукции. Часть риска компенсируется службами технического обслуживания продукции, уже находящейся у потребителя. Постоянно используемыми терминами в этой области являются "риск поставщика" и "риск потребителя". Вопросам управления качеством посвящена обширная литература. Одна из важных групп показателей качества - надежность.

   Другой вид рисков связан с осуществлением действующих технологических процессов. Речь идет об авариях различной степени тяжести, от незначительных нарушений технологических процессов до катастроф с человеческими жертвами. Здесь целесообразно обратить внимание на экологические риски, в частности, связанные с аварийными сбросами в реки технологических жидкостей, выбросами в атмосферу газов и взвешенных частиц и др. За подобные действия предприятия обычно обязаны платить штрафы согласно предписаниям экологических органов.

   Отметим риски, относящиеся к проектируемым продукции или технологическим процессам. Они могут быть связаны с ошибками разработчиков или физической невозможностью осуществления того или иного процесса. Так, в течение всей второй половины ХХ века физики постоянно говорили о появлении в ближайшее время неиссякаемого источника энергии на основе преобразования тяжелой воды с помощью управляемого термоядерного синтеза. Эта пропаганда, несомненно, сдерживала финансирование и развитие ресурсосберегающих технологий. Еще в начале ХХ в. Д.И. Менделеев говорил, что сжигать нефть - это то же самое, что топить печь ассигнациями. Тем не менее и сейчас нефть используют как топливо, разведанных запасов остается все меньше. Излишний оптимизм физиков нам всем еще дорого обойдется.

   Среди производственных рисков есть и социальные, связанные с теми или иными конфликтами. Здесь надо выделить конфликты между службами (отделами, цехами), с которыми можно бороться, оптимизируя организационную структуру предприятия. Далее - различного происхождения конфликты между менеджерами высшего звена; конфликты между профсоюзами и администрацией по поводу заработной платы или условий труда, и др. Современные методы управления персоналом позволяют заранее спрогнозировать многие из таких конфликтов и предложить пути их разрешения.

   Коммерческие риски. Речь идет о рисках, связанных с неопределенностью будущей рыночной ситуации в стране. В частности, о будущих действий поставщиков в связи с меняющимися предпочтениями потребителей. Напомним, например, о быстрых изменениях на рынке вычислительной техники в связи с появлением персональных компьютеров. Мода в той или иной степени отражается на поведении потребителей во многих областях.

   Весьма существенны риски, связанные с деятельностью партнеров организации - участников экономической жизни (в том числе их законопослушностью как налогоплательщиков), в частности, с их деловой активностью, финансовым положением, отношением к соблюдению обязательств. Особенно надо отметить роль конкурентного окружения, от действий которого зависит многое в судьбе конкретного предприятия. В частности, важны информационные риски, связанные с промышленным шпионажем и возможностями проникновения конкурентов в коммерческие тайны и иного воздействия на внутренние дела организации, в частности, через компьютерные сети типа Интернет.

   К этому же типу можно отнести риски, связанные с социальными и административными факторами в конкретных регионах, с взаимоотношениями рассматриваемой организации с органами местной и региональной власти, как официальными, так и криминальными.

   Финансовые риски. Отметим прежде всего риски, связанные с колебаниями цен на товары и услуги (динамикой инфляции), ставки рефинансирования Центрального банка, норм банковских процентов по кредитам и депозитам, валютных курсов и других макроэкономических показателей, в том числе котировок государственных и частных (корпоративных) ценных бумаг. Часть этих рисков носит объективный, а часть - число спекулятивный характер. К этому же разделу можно отнести риски, связанные с нестабильностью законодательства и текущей экономической политики (т.е. с деятельностью руководства страны, министерств и ведомств). Дополнительные проблемы создает множественность нормативно-правовых актов, регулирующих хозяйственно-экономическую деятельность организации (порядка 104 , если считать не только федеральные нормативно-правовые акты, но и нормативно-правовые акты субъектов федерации, например, г. Москвы), зачастую противоречащих друг другу, что вызывает необходимость в участии в работе организации юристов, в том числе в судебных процессах.

   Риски, возникающие на уровне государства и Земли в целом. К этому типу отнесем риски, связанные с политической ситуацией в целом, действиями партий, профсоюзов, экологических и других организаций в масштабе страны. Типичным примером являются риски, связанные с заметным изменением курса страны в результате тех или иных выборов. Другой пример - российский кризис, начавшийся в августе 1998 г. и непосредственно вызванный решением трех чиновников. Большое значения имеют риски, связанные с социальной борьбой ("рельсовая война", забастовки, массовые столкновения, терроризм, и др.).

   Внешнеэкономические риски, например, связанные с динамикой цены на нефть, крупномасштабными зарубежными финансовыми (в Юго-Восточной Азии) или военными (Югославия, Ирак) кризисами и т.д., могут оказать существенное воздействие на рассматриваемую организацию (предприятие).

   Большое число рисков связано с природными явлениями. Их можно объединить под именем "экологические". К ним относятся, в частности, риски, связанные с неопределенностью ряда природных явлений. Типичным примером является погода, от которой зависят урожайность (а потому и цены на сельскохозяйственные товары), расходы на отопление и уборку улиц, доходы от туризма и др. Обратим внимание на риски, связанные с недостаточными знаниями о природе (например, нам неизвестен точный объем полезных ископаемых в том или ином месторождении, а потому мы не можем точно предсказать развитие добывающей промышленности и объем налоговых поступлений от ее предприятий). Нельзя забывать о рисках экологических бедствий и катастроф, типа ураганов, смерчей, землетрясений, цунами, селей и др.

   Каждый из перечисленных видов рисков может быть структурирован далее. Так, имеются крупные развернутые разработки по анализу рисков технологических аварий, в частности, на химических производствах и на атомных электростанциях (соответствующая теория именуется ВАБ - вероятностный анализ безопасности). Ясно, что аварии типа Чернобыльской существенно влияют на значения СТЭЭП-факторов (принятое сокращение для комплекса социальных, технологических, экономических, экологических и политических факторов, действующих на организацию) и тем самым на поступления и выплаты из бюджета как на местном, так и на федеральном уровне (что существенно, если "организация" - это муниципальный или государственный орган власти или его подразделение типа налоговой инспекции).

2. Подходы к учету неопределенности и описанию рисков.

   В настоящее время при компьютерном и математическом моделировании для описания неопределенностей чаще всего используют такие математические средства, как:

   - вероятностно-статистические методы,

   - методы статистики нечисловых данных, в том числе интервальной статистики и интервальной математики, а также методы теории нечеткости,

   - методы теории конфликтов (теории игр).

   Они применяются в имитационных, эконометрических, экономико-математических моделях, реализованных обычно в виде программных продуктов.

   Некоторые виды неопределенностей связаны с безразличными к организации силами - природными (погодные условия) или общественными (смена правительства). Если явление достаточно часто повторяется, то его естественно описывать в вероятностных терминах. Так, прогноз урожайности зерновых вполне естественно вести в вероятностных терминах. Если событие единично, то вероятностное описание вызывает внутренний протест, поскольку частотная интерпретация вероятности невозможна. Так, для описания неопределенности, связанной с исходами выборов или со сменой правительства, лучше использовать методы теории нечеткости, в частности, интервальной математики (интервал - удобный частный случай описания нечеткого множества). Наконец, если неопределенность связана с активными действиями соперников или партнеров, целесообразно применять методы анализа конфликтных ситуаций, т.е. методы теории игр, прежде всего антагонистических игр, но иногда полезны и более новые методы кооперативных игр, нацеленных на получение устойчивого компромисса.

   Подходы к оцениванию рисков. Понятие "риск", как уже отмечалось, многогранно. Например, при использовании статистических методов управления качеством продукции риски - это вероятности некоторых событий (в статистическом приемочном контроле риск поставщика - это вероятность забракования партии продукции хорошего качества, а риск потребителя - приемки "плохой" партии; при статистическом регулировании процессов рассматривают риск незамеченной разладки и риск излишней наладки). Тогда оценка риска - это оценка вероятности, точечная или интервальная, по статистическим данных или экспертная. В таком случае для управления риском задают ограничения на вероятности нежелательных событий. Иногда под уменьшением риска понимают уменьшение дисперсии случайной величины, поскольку при этом уменьшается неопределенность. В теории принятия решений риск - это плата за принятие решения, отличного от оптимального, он обычно выражается как математическое ожидание. В экономике плата измеряется обычно в денежных единицах, т.е. в виде финансового потока (потока платежей и поступлений) в условиях неопределенности.

   Методы математического моделирования позволяют предложить и изучить разнообразные методы оценки риска. Широко применяются два вида методов - статистические, основанные на использовании эмпирических данных, и экспертные, опирающиеся на мнения и интуицию специалистов.

   Чтобы продемонстрировать сложность проблемы оценивания риска и различные существующие подходы, рассмотрим простейший случай. Пусть неопределенность носит вероятностный характер, а потери описываются случайной величиной (не вектором и не процессом). Тогда минимизация риска может состоять:

   1) в минимизации математического ожидания (ожидаемых потерь),

   2) в минимизации квантиля распределения (например, медианы функции распределения потерь или квантиля порядка 0,99, выше которого располагаются большие потери, встречающиеся крайне редко - в 1 случае из 100),

   3) в минимизации дисперсии (т.е. показателя разброса возможных значений потерь),

   4) в минимизации суммы математического ожидания и утроенного среднего квадратического отклонения (на основе известного "правила трех сигм"), или иной линейной комбинации математического ожидания и среднего квадратического отклонения (используют в случае близости распределения потерь к нормальному как комбинацию подходов, нацеленных на минимизацию средних потерь и разброса возможных значений потерь),

   5) в максимизации математического ожидания функции полезности (в случае, когда полезность денежной единицы меняется в зависимости от общей располагаемой суммы, как предполагается в учебном пособии по микроэкономике [1], в частности, когда необходимо исключить возможность разорения экономического агента), и т.д.

   Обсудим пять перечисленных постановок. Первая из них - минимизация средних потерь - представляется вполне естественной, если все возможные потери малы по сравнению с ресурсами предприятия. В противном случае первый подход неразумен. Рассмотрим условный пример. У человека имеется 10000 рублей. Ему предлагается подбросить монету. Если выпадает "орел", то он получает 50000 рублей. Если же выпадает "цифра", он должен уплатить 20000 рублей. Стоит ли данному человеку участвовать в описанном пари? Если подсчитать математическое ожидание дохода, то, поскольку каждая сторона монеты имеет одну и ту же вероятность выпасть, равную 0,5, оно равно 50000 х 0,5 + (-20000) х 0,5 = 15000. Казалось бы, пари весьма выгодно. Однако большинство людей на него не пойдет, поскольку с вероятностью 0,5 они лишатся всего своего достояния и останутся должны 10000 рублей, другими словами, разорятся. Здесь проявляется психологическая оценка ценности рубля, зависящая от общей имеющейся суммы - 10000 рублей для человека с обычным доходом значит гораздо больше, чем те же 10000 руб. для миллиардера.

   Второй подход нацелен как раз на минимизацию больших потерь, на защиту от разорения. Другое его применение - исключение катастрофических аварий, например, типа Чернобыльской. При втором подходе средние потери могут увеличиться (по сравнению с первым), зато максимальные будут контролироваться.

   Третий подход нацелен на минимизацию разброса окончательных результатов. Средние потери при этом могут быть выше, чем при первом, но того, кто принимает решение, это не волнует - ему нужна максимальная определенность будущего, пусть даже ценой повышения потерь.

   Четвертый подход сочетает в себе первый и третий, хотя и довольно примитивным образом. Проблема ведь в том, что управление риском в рассматриваемом случае - это по крайней мере двухкритериальная задача - желательно средние потери снизить (другими словами, математическое ожидание доходов повысить), и одновременно уменьшить показатель неопределенности - дисперсию. Хорошо известны проблемы, возникающие при многокритериальной оптимизации.

   Наиболее продвинутый подход - пятый. Но для его применения необходимо построить функцию полезности. Это - большая самостоятельная задача. Обычно ее решают с помощью специально организованного эконометрического исследования.

   Если неопределенность носит интервальный характер, т.е. описывается интервалами, то естественно применить методы статистики интервальных данных (как части интервальной математики), рассчитать минимальный и максимальный возможный доходы и потери, и т.д.

   Разработаны различные способы уменьшения экономических рисков, связанные с выбором стратегий поведения, в частности, диверсификацией, страхованием и др. Причем эти подходы относятся не только к отдельным организациям. Так, применительно к системам налогообложения диверсификация означает использование не одного, а системы налогов, чтобы нейтрализовать действия налогоплательщиков, нацеленные на уменьшение своих налоговых платежей. Однако динамика реальных экономических систем такова, что любые формальные модели дают в лучшем случае только качественную картину. Например, не существует математических моделей, позволяющих достаточно точно спрогнозировать инфляцию вообще и даже реакцию экономики на одноразовое решение типа либерализации цен.

   Необходимость применения экспертных оценок при оценке и управлении рисками. Из сказанного выше вытекает, что разнообразные формальные методы оценки рисков и управления ими во многих случаях (реально во всех нетривиальных ситуациях) не могут дать однозначных рекомендаций. В конце процесса принятия решения - всегда человек, менеджер, на котором лежит ответственность за принятое решение.

   Поэтому процедуры экспертного оценивания естественно применять не только на конечном, но и на всех остальных этапах анализа рассматриваемого организацией проекта, используя при этом весь арсенал теории и практики экспертных оценок.

   При этом нецелесообразно полностью отказываться от использования формально-экономических методов, например, основанных на вычислении чистых текущих (приведенных, дисконтированных) потерь и других характеристик. Использование соответствующих программных продуктов полезно для принятия обоснованных решений. Однако нельзя абсолютизировать формально-экономические методы. На основные вопросы типа: достаточно ли высоки доходы, чтобы оправдать риск, или: что лучше - быстро, но мало, или долго, но много - ответить могут только менеджеры с помощью экспертов.

   Поэтому система поддержки принятия решений в организации должна сочетать формально-экономические и экспертные процедуры.

   Разработка системы поддержки принятия решений в организации, нацеленной на оценивание рисков и управление ими - не простое дело. Укажем несколько проблем, связанных с подобной работой. Совершенно ясно, что система должна быть насыщена конкретными численными данными об экономическом состоянии региона, страны, возможно и мира в целом. Добыть такие данные нелегко, в частности, потому, что сводки Российского статистического агентства (ранее - Госкомстата РФ) искажены (подробнее о состоянии теории и практики статистики в России см. главу 1 в учебном пособии [2] и статью [3]). В частности, мы занялись изучением инфляции именно потому, что наши данные по этому показателю превышали данные Госкомстата РФ примерно в 2 раза (см. главу 7 в [2]). Зарубежные источники также содержат неточности.. Так, при составлении балансовых соотношений для макроэкономических показателей по данным [4] выяснилось, что государство должно иметь дополнительный источник доходов в несколько сотен миллиардов долларов, а доходы бизнеса имеют излишек в 30 миллиардов долларов. Другими словами, популярное учебное пособие [4] содержит данные, не согласующиеся друг с другом. Ошибка ли это авторов или сознательная фальсификация с целью скрыть от читателей характеристики американской экономики - не известно.

3. Подходы к управлению рисками

   При оценке, анализе и управлении риска могут оказаться полезными известные публикации по методам учета финансового риска [5-9]. При использовании широкого арсенала статистических методов необходимо учитывать особенности их развития в России и СССР, наложившие свой отпечаток на современное состояние в области кадров и литературных источников.

   Страхование и диверсификация - распространенные методы уменьшения неопределенности, присущей рискам, за счет повышения среднего уровня затрат.

   Чтобы управлять, надо знать цель управления и иметь возможность влиять на те характеристики риска, которые определяют степень достижения цели.

   Обычно можно выделить множество допустимых управляющих воздействий, описываемое с помощью соответствующего множества параметров управления. Тогда указанная выше возможность влиять на те характеристики риска, которые определяют степень достижения цели, формализуется как выбор значения управляющего параметра. При этом управляющий параметр может быть числом, вектором, быть элементом конечного множества или иметь более сложную математическую природу.

   Основная проблема - корректная формулировка цели управления рисками. Поскольку существует целый спектр различных характеристик риска (например, если потери от риска моделируются случайной величиной), то оптимизация управления риском сводится к решению задачи многокритериальной оптимизации. Например, естественной является задача одновременной минимизации среднего ущерба (математического ожидания ущерба) и разброса ущерба (дисперсии ущерба).

   Как известно, для любой многокритериальной задачи целесообразно рассмотреть множество решений (т.е. значений параметра управления), оптимальных по Парето. Эти решения оптимальны в том смысле, что не существует возможных решений, которые бы превосходили бы Парето-оптимальные решения одновременно по всем критериям. Точнее, превосходили бы хотя бы по одному критерию, а по остальным были бы столь же хорошими. Теория Парето - оптимальных решений хорошо развита (см., например, монографию [19]).

   Ясно, что для практической реализации надо выбирать одно из Парето - оптимальных решений. Как выбирать? Разработан целый спектр подходов, из которых выбор может быть сделан только субъективным образом. Таким образом, снова возникает необходимость применения методов экспертных оценок.

   Эксперты могут выбирать непосредственно из множества Парето - оптимальных решений, если оно состоит лишь из нескольких элементов. Или же они могут выбирать ту или иную процедуру сведения многокритериальной задачи к однокритериальной.

   Как пытаются решать многокритериальные задачи? Один из подходов - выбрать т.н. "главный критерий", по которому проводить оптимизацию, превратив остальные критерии в ограничения. Например, минимизировать средний ущерб, потребовав, чтобы дисперсия ущерба не превосходила заданной величины.

   Иногда задача многокритериальной оптимизации допускает декомпозицию. Найдя оптимальное значение для главного критерия, можно рассмотреть область возможных значений для остальных критериев, выбрать из них второй по важности и оптимизировать по нему, и т.д.

   Что же делают эксперты? Они выбирают главный критерий (или упорядочивают критерии по степени важности), задают численные значения ограничений, иногда точность или время вычислений.

   Второй основной подход - это свертка многих критериев в один интегральный и переход к оптимизации по одному критерию. Например, рассматривают линейную комбинацию критериев. Строго говоря, метод "главного критерия" - один из вариантов свертки, в котором вес главного критерия равен 1, а веса остальных - 0. Построение свертки, в частности, задание весов, целесообразно осуществлять экспертными методами.

   Используют также методы, основанные на соображениях устойчивости (наиболее общий подход к изучению устойчивости рассмотрен в монографии [11]). При этом рассматривают область значений управляющих параметров, в которых значение оптимизируемого одномерного критерия (главного параметра или свертки) отличается от оптимального не более чем на некоторую заданную малую величину. Такая область может быть достаточно обширной. Например, если в линейном программировании одна из граней многогранника, выделенного ограничениями, почти параллельна плоскости равных значений оптимизируемого критерия, то вся эта грань войдет в рассматриваемую область. В выделенной области можно провести оптимизацию другого параметра, и т.д. При таком подходе эксперты выбирают допустимое отклонение для основного критерия, выделяют второй критерий, задают ограничения и т.д.

   Отметим, что рассмотренные выше вероятностно-статистические подходы к оцениванию рисков предполагают использование в качестве критериев таких характеристик случайной величины, как математическое ожидание, медиана, квантили, дисперсия и др. Эти характеристики определяются функцией распределения случайного ущерба, соответствующего рассматриваемому риску. При практическом использовании этого подхода перечисленные характеристики оцениваются по статистическим данным. Они оцениваются по выборке, состоящей из наблюденных величин ущерба. При этом необходимо вычислять доверительные интервалы, содержащие оцениваемые теоретические характеристики с заданной доверительной вероятностью. Таким образом, критерий, на использовании которого основана оптимизация, всегда определен лишь с некоторой точностью, а именно, лишь с точностью до полудлины доверительного интервала. Таким образом, мы приходим к постановке, рассмотренной в предыдущем абзаце.

   Необходимо обратить внимание на существенное изменение ситуации в области вычислительной оптимизации за последние 40 лет. Если в 1960-е годы из-за маломощности тогдашних компьютеров большое значение имела разработка быстрых методов счета, то в настоящее время внимание переносится на постановки задач и интерпретацию результатов. По нашим наблюдениям, это объясняется не только наличием различных программных продуктов по оптимизации, но и тем, что почти любую практическую задачу оптимизации можно решить простейшими методами типа переборных (перебирая возможные значения управляющих параметров с маленьким шагом), либо методом случайного поиска, поскольку быстродействие современных компьютеров позволяет это сделать.

   В риск-менеджменте компании целесообразно выделить оперативное управление риском и стратегическое управление риском. Первый вид деятельности - постоянно проводящаяся работа, связанная с обеспечением качества продукции, плановым снижением экологических рисков [], работой с покупателями, поставщиками, персоналом, связанная с повышением лояльности, и т.д.

   Стратегический риск-менеджмент - составная часть стратегического менеджмента и тем самым стратегического планирования [13]. Надо оценивать риски высокого уровня, например, прогнозировать наличие в продаже и цену тех или иных товаров через 10-20 лет, например, нефти и "больших" компьютеров. Большое значение на этом уровне имеет тенория прогнозирования и экспертные оценки [2, 14-19].

Цитированная литература

   1. Пиндайк Р., Рубинфельд Д. Микроэкономика. - М.: "Экономика" - "Дело", 1992.

   2.Орлов А.И. Эконометрика.- М. : Экзамен,2002.-576 с.

   3. Орлов А.И. О перестройке статистической науки и ее применений - Вестник статистики, 1990, No. 1, с.65-71.

   4. Макконнелл К.Р., Брю С.Л. Экономикс: Принципы, проблемы и политика. В 2 т.: Пер. с англ. 11-го изд. - М.: Республика, 1992.

   5. Балабанов И.Т. Риск-менеджмент. - М.: Финансы и статистика, 1996. - 192 с.

   6. Гвозденко А.А. Основы страхования. - М.: Финансы и статистика, 1998. - 304 с.

   7. Орлов А.И., Федосеев В.Н. Менеджмент в техносфере. - М.: Академия, 2003. - 400 с.

   8. Первозванский А.А., Первозванская А.Н. Финансовый рынок: расчет и риск. - М.: Инфра-М, 1994

   9. Чернов В.А. Анализ коммерческого риска. - М.: Финансы и статистика, 1998. - 128 с.

   10. Подиновский В.В., Ногин В.Д. Парето-оптимальные решения многокритериальных задач. - М.: Наука, 1982.

   11. Орлов А.И. Устойчивость в социально-экономических моделях. - М.: Наука, 1979. - 296 с.

   12. Экология. Учебное пособие под редакцией С.А. Боголюбова. - М.: Знание, 1999. - 288 с.

   13. Менеджмент. Учебное пособие под ред. Ж.В.Прокофьевой. - М.: Знание, 2000. - 288 с.

   14. Бестужев-Лада И.В. Окно в будущее: Современные проблемы социального прогнозирования. - М.: Мысль, 1970. - 269 с.

   15. Гаврилец Ю.Н. Социально-экономическое планирование: Системы и модели. - М.: Экономика, 1974. - 174 с.

   16. Сидельников Ю.В. Теория и организация экспертного прогнозирования. - М.: ИМЭМО АН СССР, 1990. - 196 с.

   17. Тейл Г. Эконометрические прогнозы и принятие решений. - М.: Статистика, 1971. - 488 с.

   18. Янч Э. Прогнозирование научно-технического прогресса. - М.: Прогресс, 1990. - 568 с.

   19. Орлов А.И. Сценарии социально-экономического развития России до 2007 г. - Журнал "Обозреватель-Observer". 1999. No.10 (117). С.47-50.

Зачет (тест) по курсу "Риск-менеджмент компании"

(Обведите наиболее подходящий вариант ответа.)

   1. Может ли менеджер исключить риски в своей работе? А) Да Б) Может их уменьшить В) Нет

   2. Приводит ли осознание мировым сообществом глобальных экологических рисков к ограничению предпринимательской свободы в области эксплуатации природных ресурсов? А) Да Б) Скорее да, чем нет В) Скорее нет, чем да Г) Нет

   3. Как соотносятся два числа: Х - квантиль порядка Ѕ некоторого распределения и медиана Y того же распределения?

   А) X<Y Б) X=Y В) X>Y

   4. При входном уровне дефектности р = 0,05 вероятность приемки партии при использовании одноступенчатого плана статистического контроля (2, 0) равна А) 0,3725 Б) 0,9995 В) 0,9025 Г) 0,8763

   5. Приемочный уровень дефектности для плана (50,0) равен А) 0,1 Б) 0,05 В) 0,001 Г) 0,0005

   6. Браковочный уровень дефектности для плана (2,0) равен А) 0,125 Б) 0,684 В) 0,05 Г) 0,999

   7. Решено, что предел среднего выходного уровня дефектности не должен превосходить 0,07. Какой минимальный объем выборки n обеспечивает выполнение этого условия для плана (n, 0)? А) 4 Б) 5 В) 6 Г) 7 Д) 10

   8) Всегда ли экономически целесообразен выходной контроль качества продукции? А) Всегда Б) В зависимости от системы работы с потребителем В) Никогда

   9. Почему при статистической проверке гипотез вводят ограничения на риск ошибки первого рода (уровень значимости)? А) По традиции Б) Поскольку именно нулевая гипотеза обычно представляет наибольший интерес В) Поскольку альтернативная гипотеза часто бывает сложной и соответствующий риск нельзя определить однозначно.

   10. Непараметрические оценки плотности распределения вероятностей - это а) выдумки математиков б) экзотические методы обработки данных в) наиболее обоснованные методы принятия решений

   11. На каком основании интервальная математика и интервальная статистика получили свое название? А) Потому что в них используются интервалы. Б) Потому что исходные данные - числа, а не интервалы.

   12. Мешает ли нечеткость слов взаимопониманию и эффективности управления? А) Мешает Б) Частично мешает, частично помогает - В) Помогает

   13. Какое количество зерен пшеницы (объем 0,01 см3) Вы бы назвали кучей? А) 10 000 Б) 10 000 000 В) 10 000 000 000

*   *   *   *   *   *   *

Межотраслевой институт повышения квалификации

Московского государственного технического университета им.Н.Э.Баумана (МИПК МГТУ им.Н.Э.Баумана)

Факультет повышения квалификации "Инженерный бизнес и менеджмент" (ФПК ИБМ)

Прогнозирование в маркетинге

Программа курса и вопросы к зачету (июнь 2003 г.)

   Занятие No. 1 (16 мая)

   1. Оценивание функции ожидаемого спроса по результатам опроса потребителей. Вычисление оптимальных значений розничной цены при различных значениях оптовой цены.

   2. Необходимость выборочных исследований. Маркетинговое исследование потребителей растворимого кофе. Различные виды вопросов (открытый, закрытый, полузакрытый), их достоинства и недостатки.

   3. Асимптотическое распределение выборочной доли (в случае ответов типа "да" - "нет"). Интервальное оценивание доли и метод проверки статистической гипотезы о равенстве долей.

   4. Введение в прогнозирование: основные понятия. Статистические (на основе объективной информации) и экспертные (на основе мнений специалдистов) методы прогнозирования.

   Занятие No. 2 (23 мая)

   5. Метод наименьших квадратов для линейной прогностической функции. Подход к оцениванию параметров. Критерий правильности расчетов. Оценка остаточной дисперсии.

   6. Точечный и интервальный прогноз. Изменение ширины доверительного интервала при увеличении горизонта прогнозирования.

   7. Метод наименьших квадратов для модели, линейной по параметрам. Случай нескольких независимых переменных (регрессоров). Преобразования переменных. Оценивание коэффициентов многочлена.

   Занятие No. 3 (30 мая)

   8. Методы классификации - частный случай методов прогнозирования в маркетинге. Триада: построение классификаций - анализ классификаций - использование классификаций. Лемма Неймана-Пирсона и непараметрический дискриминантный анализ на основе непараметрических оценок плотности.

   9. Линейный дискриминантный анализ (диагностика на два класса с помощью "индексов" - линейных функций от координат). Характеристики качества алгоритмов диагностики. Почему нельзя использовать такую характеристику, как "вероятность правильной классификации"? Рекомендуемая характеристика - "прогностическая сила".

   9. Чем схожи и чем различаются задачи группировки и кластер-анализа. Агломеративные иерархические алгоритмы ближнего соседа, дальнего соседа и средней связи.

   10. Метод k-средних и проблема остановки алгоритма. Совместное (последовательное и параллельное) использование различных алгоритмов кластер-анализа. Двухкритериальная оптимизационная постановка кластер-анализа на основе внутрикластерного и межкластерного разбросов.

   11. Кластер-анализ признаков. Измерение расстояния между признаками с помощью линейного коэффициента корреляции Пирсона и непараметрического рангового коэффициента корреляции Спирмена.

   Занятие No. 4 (6 июня)

   12. Динамика потребительского поведения в жизненном цикле семьи.

   13. Демографические прогнозы и прогнозирование максимального объема рынка потребительских товаров.

   14. Математическая модель оптимизации интервалов между запусками в производство марок продукции.

   Занятие No. 5 (20 июня)

   15. Прогнозирование рынка в различных ситуациях. Прогнозирование максимального объема рынка. Прогнозирование объема продаж в стабильных условиях в натуральных показателях. Прогнозирование стоимостных характеристик с учетом инфляции.

   16. Потребительская корзина и индекс инфляции. Изменение объема платежеспособного спроса в России (оценивание на основе динамики доходов и инфляции).

   17. Прогнозирование в нестабильных условиях. Эффект от появления персональных компьютеров. Мобильные телефоны в России. Поиск "точек роста".

   18. Поведение потребителей. Физические потребности и духовные потребности. Предложение порождает спрос (создание новых потребностей). Микроэкономическая теория рационального выбора на основе предпочтений потребителей и полезности. "Пороговый" выбор и задача "о разборчивой невесте". Оценка и изучение ожидаемого спроса в лабораторной работе.

   19. Прогноз курса доллара на конец 2003 г.

   20. Прогнозирование при анализе матрицы портфеля Бостонской консалтинговой группы.

   21. Метод сценариев (на примере речи О. Бендера в Васюках).

   Занятие No. 6 (27 июня)

   22. Внешняя среда предприятия - СТЭЭП-факторы (социальные, технологические, экономические, экологические, политические) и конкурентное окружение. Картели и антитрестовское законодательство в США. "Дилемма заключенного".

   23. Динамика макроэкономических показателей России и мировые тенденции.

   24. Вероятные, оптимистические и пессимистические сценарии. Сценарий развития России при принятии свободы торговли.

   Зачет.

   Рекомендуемая литература

   1. Орлов А.И. Эконометрика.- М.: Экзамен, 2003. - 576 с. - Главы 2, 4,5.

   2. Менеджмент / Под ред. Ж.В.Прокофьевой. - М.: Знание, 2000. - Гл.3,4 (сайт http://antorlov.chat.ru).

Раздаточный материал к занятию No. 6.

Таблица 1.

Сравнение экономических показателей России за 1989 г. и 2001 г.

No. п/п

Вид продукции

Единица измерения

1989 год

2001 год

Уровню какого года соответствует производство в 2001 году

 

Промышленность

 

 

 

 

1

Нефть

Млн. т

552

337

1972

2

Уголь

Млн. т

410

269

1957

3

Стальные трубы

Тыс. т

12510

5404

1965

4

Вагоны

Шт.

28000

7385

1910

5

Металлорежущие станки

Шт.

64600

8288

1931

6

Кузнечно-прессовые машины

Шт.

27800

1290

1933

7

Грузовые автомобили

Тыс. шт.

697

173

1937

8

Тракторы

Тыс. шт.

235

15,2

1931

9

Зерноуборочные комбайны

Шт.

62200

9063

1933

10

Радиоприемные устройства

Тыс. шт.

5561

273

1947

11

Телевизоры

Тыс. шт.

4465

1004

1958

12

Кальцинированная сода

Тыс. т

3546

2334

1968

13

Химические волокна и нити

Тыс. т

731

158

1959

14

Вывоз древесины

Млн. м3

351

87,2

1929

15

Пиломатериалы

Млн. м3

83

17,3

1930

16

Бумага

Тыс. т

5344

3415

1969

17

Цемент

Млн. т

84,5

35,1

1962

18

Шифер

Млн. плиток

5034

1715

1958

19

Кирпич строительный

Млрд. шт.

24,1

10,5

1953

20

Ткани всех видов

Млн. м2

8707

2617

1910

21

Шерстяные ткани

Млн. м2

471

56,4

1880

22

Обувь

Млн. пар

777,7

32,2

1900

 

Сельское хозяйство

 

 

 

 

23

Мясо

Тыс. т

6621

1233

1953

24

Молоко

Млн. т

55,7

32,9

1958

25

Цельномолочная продукция

Тыс. т

20800

6734

1963

26

Животное масло

Тыс. т

820

269

1956

 

Поголовье скота (на 21 декабря)

 

 

 

 

27

Крупный рогатый скот

Млн. голов

58,8

32,9

1958

28

Свиньи

Млн. голов

40

15,5

1936

29

Овцы и козы

Млн. голов

61,3

15,2

1750

Таблица 2.

Динамика основных экономических показателей России

(по официальным данным Госкомстата и Центрального Банка РФ)

Год

Валовой внутренний продукт

Объем промышленной продукции

Капитальные вложения

% к предыдущему году

% к 1990 году

% к предыдущему году

% к 1990 году

% к предыдущему году

% к 1990 году

1991

95

95

92

92

85

85

1992

85,5

81

82

75,4

60

51

1993

91,3

74

85,9

64,8

88

44,9

1994

87,3

64,7

79,1

51,3

76

34,1

1995

95,8

62

96,3

49,4

90

30,7

1996

94

58,3

95

46,9

82

25,2

1997

100,4

58,5

101,9

47,8

95

23,9

1998

95,1

55,7

94,8

45,3

88

21

1999

104,6*

58,2

111

50,3

105,3

22,2

2000

109,9*

64,0

111,9

56,3

117,4

26,0

2001

105,7*

67,6

104,5

59,0

108,7

28,3

   В табл.2 для 1999-2001 гг. вместо данных по ВВП приведены данные по ИБО - индексу изменения выпуска пяти базовых отраслей (промышленность, сельское хозяйство, строительство, транспорт, розничная торговля).

Таблица 3

Государственные расходы (расходная часть бюджета) в процентах от ВВП

No. п/п

Страна

1870 г.

1913 г.

1960 г.

1998 г.

1

Швеция

5,7

10,4

31,1

58,5

2

Франция

12,6

17,0

34,6

54,3

3

Бельгия

-

13,6

30,3

49,4

4

Италия

11,9

11,1

30,1

49,1

5.

Нидерланды

9,1

9,0

33,7

47,2

6

Германия

-

14,8

32,4

46,9

7

Норвегия

5,9

9,3

29,9

46,9

8

Великобритания

-

12,7

32,2

40,2

9

Япония

-

8,3

17,5

36,9

10

Австралия

18,3

16,5

21,2

32,9

11

США

7,3

7,5

27,0

32,8

12

Среднее по 11 странам

10,1*

11,8

29,1

45,0

13

Россия

    

11,5

65,0

11,0

   Примечание. *За 1870 г. - среднее по 7 странам.

Лабораторная работа "Оценка и изучение ожидаемого спроса" по курсу "Прогнозирование в маркетинге"

   Соберите и проанализируйте информацию о максимально возможной цене, которую потребители готовы заплатить за ___

   Для этого:

   1. Опросите не менее 30 человек (не считая отказавшихся от ответа). Задавайте опрашиваемым вопрос: "Какую максимальную цену Вы готовы заплатить за ___" ?

   2. Постройте функцию спроса.

   3. Найдите розничные цены, максимизирующие прибыль, для не менее чем пяти значений оптовой цены.

Литература к лабораторной работе

   Орлов А.И. Эконометрика. Учебник для вузов. - М.: Экзамен, 2002 (Первое издание), 2003 (Второе издание). - 576 с. - Глава 2.

*   *   *   *   *   *   *

Полезный сайт

   "Disser" - это комплект макросов для Word, упрощающие создание рефератов и курсовых. Готовое оформление, титульный лист, содержание создаются несколькими щелчками мыши. Ввод предельно упрощён благодаря автозамене, расшифровывающей популярные сокращения. Также: настройка недокументированных возможностей, дополнительные шаблоны, сборник полезных советов, методичка "Как написать реферат".

   Сайт: http://kankowski.narod.ru.

   Зеркало: http://e-town.nm.ru.

*   *   *   *   *   *   *

Это интересно...

   "Протоколы Интернет". "Почтовый сервер". "Таблица разделов". "Прошивка BIOS"... Вам про все это хочется знать, но не у кого спросить, а книги на полках магазинов такие сложные и занудные, да к тому же еще и дорогие? Просто совет: обратите внимание на книгу "Тайны и секреты компьютера" - http://comptain.fromru.com. Поищите ее в магазинах, если хотите. В одной книге вы найдете образный, легкий, но в то же время профессиональный рассказ как об устройстве компьютеров, так и о том, как их возможности использовать в своих целях. Берите и читайте - не пожалеете ни о цене, ни о времени на чтение.

*   *   *   *   *   *   *

Полезная книга

   Как вы отнесетесь к игре типа Quake, встроенной в вашу web-страницу, на вашем сайте? Которая позволит посетителям насладиться виртуальными боями на вашем сайте, в разработанном вами лабиринте? Как вы думаете, поднимет это посещаемость вашего сайта? Так сделайте такую игру. Не знаете, даже, на каком языке? А хотя бы на Java - на нем у вас это точно получится. Освоить язык можно по книге А.Л.Фридмана "Построение Интернет-приложений на языке Java". Берите и читайте - и через некоторое время можете приглашать гостей поиграть...

*   *   *   *   *   *   *

   На сайте http://antorlov.euro.ru или его зеркале http://www.newtech.ru/~orlov Вы можете найти:
   1. Макрос Microsoft Word 97/2000/XP "ВерсткаТекстаКнижкой" для создания в Word книжек размером в половину листа, макросы для создания каталогов файлов, извлечения из недр Word красивых значков.
   2. Макрос Microsoft Word 97/2000/XP Конвертор "Число-текст" с поддержкой русского, украинского и английского языков и двух падежей, обладающий также возможностью автоматического обновления вставленных текстовых расшифровок при изменении значений исходных чисел.
   3. Учебник профессора А.И.Орлова по менеджменту.
   4. Статьи А.И.Орлова по актуальным вопросам статистики и экономики.
   5. Лекцию об устройстве ядерных реакторов.
   6. Информацию об Институте высоких статистических технологий, который занимается развитием, изучением и внедрением современных методов анализа технических, экономических, социологических, медицинских данных.

   Страница рассылки - http://antorlov.euro.ru/ivst.htm или http://www.newtech.ru/~orlov/ivst.htm.

   В Москве для работы с сайтом www.newtech.ru/~orlov Вы можете воспользоваться бесплатным демо-доступом компании NewTech. Телефоны: (095)234-94-49, (095)956-37-46. Login: imt. Password: test, Primary DNS: 212.16.0.1, Secondary DNS: 193.232.112.1. Вход под этим логином бесплатный, сеанс связи неограничен. Если Вам отказывают в авторизации, то просто повторите дозвон позже.

   На сайте http://karamurza.chat.ru представлена книга видного современного философа и политолога С.Г.Кара-Мурзы "Опять вопросы вождям", которая является глубоким научным исследованием проблем западного и российского общества. Книга предназначена всем интересующимся политологическими и социологическими проблемами.

   Из книги Максима Калашникова "Битва за Небеса", представленной на сайте http://sw.rus-idea.com, вы узнаете о том, какими должны были стать воздушно-космические силы СССР 2000 года и прочтете о русской авиации 20 века.

Удачи вам и счастья!



http://subscribe.ru/
E-mail: ask@subscribe.ru
Отписаться
Убрать рекламу

В избранное