Рассылка закрыта
При закрытии подписчики были переданы в рассылку "Политика и аналитика" на которую и рекомендуем вам подписаться.
Вы можете найти рассылки сходной тематики в Каталоге рассылок.
Рейтинги кандидатів
Информационный Канал Subscribe.Ru |
очима пересічного українця
Випуск №1 від 09.09.04
Выпуск №1 от 09.09.04
Це перший випуск розсилки Президентські вибори 2004 в Україні: очима пересічного українця. Ще був вступний випуск. Він вийшов 02.09.04 і, якщо ви не отримували його, то ви можете ознайомитися з його вмістом в архіві розсилки.
Мене (як і раніше :) звати Олександр Лихо і я намагаюся зробити цю розсилку цікавою для вас, але розраховую, що ви допоможете мені у тому. Тому звертаю вашу увагу на опитування, форма якого розміщена на головній ділянці мієї ділянки (веб-сайту) Soft навколо. Проголосуйте будьласка. Дякую.
Отже, як то і було обіцяно у вступному випускові розсилки, у цьому випуску (а можливо також у кількох наступних) ми розглядатимемо тему рейтингів кандидатів в президенти. Ця тема, дещо несподівано для самого автора, спонукає до розлогого викладення. (Якщо ви хочете просто ознайомитися з наявними рейтингами, ви можете це зробити в розділі Перший тур).
Річ у тому, що автор хоче не просто навести результати виконаних соціологічних досліджень, і навіть не просто дати коментар до їх результатів, але провести свое міні-дослідження. Таке дослідження очевидно має грунтуватись на певній методиці. Складанню такої методики буде присвячено наступний випуск, а у цьому подаються тількі цифри з результатів тих опитувань, які автор дібрав в Інтернет.
Это первый выпуск рассылки Президентские выборы 2004 в Украине: взгляд среднего украинца. Еще бил вступительный выпуск. Он вышел 02.09.04 и, если вы не получали его, то вы можете познакомиться его содержанием в архиве рассылки.
Меня (как и раньше :) звать Олександр Лыхо и я стараюсь сделать эту рассылку интересной для вас, но рассчитываю, что вы поможете мне в этом. Поэтому обращаю ваше внимание на опрос, форму которого вы можете найти на главной страничке моего веб-сайта Soft навколо. Проголосуйте пожалуйста. Спасибо.
Итак, как и было обещано во вступительном выпуске рассылки, в этом выпуске (а также в нескольких следующих) мы будем рассматривать тему рейтингов кандидатов в президенты. Эта тема, несколько неожиданно для самого автора, подталкивает к подробному изложению. (Но если вы хотите просто ознакомиться с наличными рейтингами, ви можете сразу перейти к разделу Первый тур).
Дело в тому, что автору хочется не просто привести результаты выполненных социологических исследований, и даже не просто дать комметарий к их результатам, но провести свое мини–исследование. Такое исследование очевидно должно основываться на определенной методике. Описанию такой методики будет посвящен следующий выпуск, а в этом представляются только цифры результатов тех опросов, которые автор подобрал из Интернет.
Нижче наводяться результати рейтингів, виконаних різними закладами і опублікованими в Інтернет. Тут наводяться всі дані, які були вказані при публікації, причому декотрі дані по одному рейтингу доводилося збирати з різних джерел. Якщо якась величина, надана для инших досліджень, відсутня для певного рейтингу, це позначено знаком питання.
Більшість даних отримано з ділянки Українські Новини, де дані по більшості рейтингів зібрано на окремій сторінці.
Аби зробити дані подання більш компактним і наочним, використоуються такі скорочення:
- для закладів, що виконували дослідження:
Ниже представлены результаты рейтингов, выполненных разними учреждениями и опубликованными в Интернет. Тут подаются все данные, которые были указаны при публикации, причем некоторые данные по одному рейтингу приходилось собирать из различных источников. Если какая-нибудь величина, указанная для других исследований, отсутствует для определенного рейтинга, это обозначено знаком вопроса.
Большинство данных получено с сайта Українські Новини, где данные по большинству рейтингов собраны на отдельной страничке.
Чтобы сделать представление данных более компактным и наглядным, используются такие сокращения:
- для учреждений, выполнивших исследование:
Скорочення (Сокращение) |
Заклад (Учреждение) |
КМІС | Київський міжнародний інститут соціології |
ОМ | российский фонд "Общественное мнение" |
УДК | "Українське демократичне коло" |
УІСДУЦПМ | Український інститут соціальних досліджень та Український центр політичного менеджменту |
ФДІТНСУ | Фонд "Демократичні ініціативи" і компанія "Тейлор Нельсон Софрез Україна" |
ФДІЦС | Фонд "Демократичні ініціативи" і Центр „Соціс” |
ЦР | Центр Разумкова |
ЮСС | "Юкрейниан социолоджи сервис" |
- для кандидатів (альтернатив опитування)
- для кандидатов (альтернатив опроса)
Скорочення (Сокращение) |
Альтернатива (кандидат) |
М | Мороз |
С | Симоненко |
Ю | Ющенко |
Я | Янукович |
НВ | не визначились (не определились) |
НУ | не братиме участі (не будут участвовать) |
ПВ | проти всіх (против всех) |
Рейтинг инших кандидатів, навіть якщо такий подається в результатах рейтинга, не вказується з огляду на те, що ніхто з решти (окрім Вітренко і Кінаха) не набирає більше одного відсотка голосів.
Рейтинг других кандидатов, даже если такой предоставляется в результатах рейтинга, не указывается с учетом того, что никто из них (кроме Витренко и Кинаха) не набирает больше одного процента голосов.
Це рейтинг кандидатів у Президенти України (далі просто кандидати) на перший тур виборів. Здебільшого респондетам задавали питання на кшталт: "За якого б з кандидатів ви голосували б якби вибори відбулися у (кінець періоду проведення відповідного опитування)?".
Это рейтинг кандидатов в Президенты Украины (далее просто кандидаты) на первый тур выборов. В большинстве случаев респондентам задавался подобный вопрос: "За какого из кандидатов вы проголосовали если бы выборы происходили в (конец периода проведения соответствующего опроса)?"
Заклад | М | С | Ю | Я | НВ | НУ | ПВ | Дата | Вибірка/ Похибка |
ФДІТНСУ | 5,3 | 14,1 | 22,3 | 9,3 | ? | ? | ? | ?-?.1?.2003 | ?/ ? |
ЦР | 6,1 | 13,4 | 23,8 | 12 | ? | ? | ? | ?-?.1?.2003 | ?/ ? |
КМІС | ? | ? | 28,8 | 20,6 | ? | ? | ? | ?-?.06 | ?/ ? |
УІСДУЦПМ *4 | 6 | 14 | 24 | 16 | 11 | 6 | 6 | 9-15.06 | 2100/ 2,2 |
ФДІЦС*** | 6.6 | 8.5 | 28.8 | 19.1 | 12.8 | 4.8 | 5.8 | 01-10(?).07 | 1200/ 3 |
КМІС | 6 | 9 | 30 | 25 | ? | ? | ? | 7-15.07 | ?/ ? |
ЮСС | 8 | 13 | 34,8 (38?) | 21,6 (26?) | ? | ? | ? | 12-22.07 | 1600 / 2,5% |
КМІС | 6.0 | 8.8 | 29.9 | 25.2 | 16.0 | ? | 3.8 | 19-27.07 | 2002 / 2,4 |
ЦР | 6.5 | 9.8 | 27.9 | 21.1 | 14 | 6.5 | 8.1 | 22-28.07 | 2014 / 2,3 |
УДК* | 5,6 | 7,9 | 28,3 | 21,4 | 20,7 | 5,9 | 3,6 | 6-13.08 | 1000 /<4% |
КМІС ** | 8 | 8 | 30 | 25 | 19 | ? | 4 | 7-15.08 | 2002 /2,4 |
ОМ *5 | ? | ? | 26 | 23 | ? | ? | ? | 22.08 | ? /? |
ФДІЦС | 6.4 | 7.1 | 28.9 | 24.1 | 20.4 | 7.0 | 2.3 | 19-26.08 | 2000 /2,2 |
ФДІЦС | 6,5 | 7.4 | 30.8 | 24.2 | 19.4 | 6.2 | 2.1 | 04.09 | 2000 /2,2 |
* на замовлення Інституту політики. Витренко 2,7%; Кинах 1,2%
** Витренко 2%; Кинах - 1%
*** до опитування вносилися не кандидати.
*4 цікавий коментар: Стандартні відхилення при достовірних 95 відсотках і співвідношенні змінних Від 0,1: 0,9 до 0,5: 0,5 становлять 1,31 - 2,18 відсотка.
*5 наводиться тільки як приклад сумнівних результатів рейтингу.
Для самостійної роботи: підрахуйте скільки відсотків набирає кожне рейтингове дослідження за сумою по всіх альтернативах. Слід, звісно, очикувати, що та сума становитиме 100 відсотків, але це далеко не так.
Зверність також, будьласка, увагу на несподіване і безпідставове підвищення "рейтингу" Януковича в результатах, отриманих КМІС на протязі 7-15.07.
* по заказу Института политики. Витренко 2,7%; Кинах 1,2%
** Витренко 2%; Кинах - 1%
*** в альтернативы опроса включались не кандидаты.
*4 интересный комментарий: Стандартные отклонения при достоверных 95 процентах и соотношении переменных от 0,1: 0,9 до 0,5: 0,5 составляют 1,31 - 2,18 процента.
*5 приводится как пример сомнительных результатов рейтинга.
Для самостоятельной работы: подсчитайте сколько процентов набирает каждое рейтинговое исследование по сумме по всех альтернативах. Следует конечно ожидать что эта сумма будет составлять 100 процентов, но это далеко не так.
Обратите пожалуйста внимание также на неожиданное и безосновательное увеличение "рейтинга" Януковича в результатах, полученных КМІС на протяжении 7-15.07.
Це рейтинг кандидатів на другий тур виборів. Здебільшого респондетам задавали питання на кшталт: "Якщо до другого туру вийдуть Ющенко і Янукович, за кого ви проголосуєте?".
Это рейтинг кандидатов на второй тур выборов. В основном респондентам задавали подобный вопрос: "Если во второй тур выйдут Ющенко и Янукович, то за кого вы проголосуете?".
Заклад | Ю | Я | НВ | ПВ | НУ | Дата |
УІСІ | 40 | 21 | ? | ? | ? | ?-?.10.2003 |
КМІС | 40,1 | 31,4 | ? | ? | ? | ?-?.06 |
ФДІЦС | 40.4 | 31.1 | 12.4 | 10.1 | 6.0 | 01-10(?).07 |
КМІС | 39,2 | 36,7 | 14,5 | 9,7 | ? | 7-15.07 |
КМІС | 39,3 | 36,5 | 14,3 | 9,9 | ? | 19-27.07 |
УДК | 38 | 28 | 17 | 7 | 10 | 6-13.08 |
ФДІЦС | 38.2 | 34.5 | 10.4 | 9.2 | 7.8 | 19-26.08 |
ОМ | 35 | 34 | ? | ? | ? | 22.08 |
ФДІЦС | 40.2 | 33.2 | ? | ? | ? | 04.09 |
В цих даних також, будьласка, зверніть увагу на підвищення "рейтингу" Януковича в результатах, отриманих КМІС на протязі 7-15.07. Дещо дивне, чи не так?
В этих данных также, пожалуйста, обратите внимание на повышение "рейтинга" Януковича в результатах, полученных КМІС на протяжении 7-15.07. Нечто удивительное, не так ли?
Це дослідження виконано Українським інститутом соціальних досліджень та Українським центром політичного менеджменту. Очевидно, воно є надзвичайно цінним тим, що дозволяє відстежувати динаміку вибора респондентів на протязі більш ніж одного року (показано не всі дані). Таким чином, можна вислювлювати гіпотези, щодо впиливу важливих подій на настрої виборців, і перевіряти їх.
Так, можна помітити зв'язок між провалом голосування по політреформі і значенням рейитнгу Ющенка, а також між висуванням Януковича єдиним кандидатом і значенням його рейтингу.
Это исследование выполнено Украинским институтом социальных исследований и Украинским центром политического менеджмента. Очевидно, оно является особенно ценным тем, что позволяет отслеживать динамику выбора респондентов на протяжении более чем одного года (показано не все данные). Таким образом, можно высказывать гипотезы относительно влияния важных событий на настроения избирателей и проверять ети гипотезы.
Так можно заметить связь между провалом голосования по политреформе и значением рейтинга Ющенко, а также между выдвижением Януковича единим кандидатом и значением его рейтинга.
Рік/Міс. | 2003 | 2004 | |||||||||
Альт. | 06 | 09 | 10 | 11 | 12 | 01 | 02 | 03 | 04 | 05 | 06 |
Ю | 21 | 23 | 21 | 20 | 22 | 21 | 21 | 24 | 22 | 24 | 24 |
Я | 6 | 10 | 9 | 13 | 11 | 11 | 13 | 14.5 | 17 | 18 | 16 |
С | 10 | 13 | 14 | 12 | 12 | 12 | 12 | 11 | 12 | 14 | 14 |
М | 5 | 5 | 5 | 5 | 5 | 7 | 5 | 6 | 6 | 6 | 6 |
ПВ | 11 | 9 | 7 | 7 | 10 | 8 | 10 | 7 | 5 | 6 | 6 |
НВ | 15 | 10 | 10 | 10 | 13 | 15 | 14 | 6,5 | 12 | 8 | 11 |
НУ | 11 | 7 | 6 | 6 | 7 | 6 | 7 | 12 | 4 | 5 | 6 |
Дані по березню місяцю справді дуже цікаві - ймовірно невдале голосування таки справило значний сплив. Також варти уваги значення рейтингу Симоненко, значно більше за инші рейтинги.
Данные по марту месяцу на самом деле очень интересны - вероятно неудачное голосование все таки оказало значительное влияние. Также заслуживают внимания значения рейтинга Симоненко, значительно большие за другие рейтинги.
Після наведення чисел рейтингів, мені хочеться зробити кілька зауважень щодо самих рейтингів, а також щодо їх сприйняття. При цьому я використаю слова, сказані Тарасом Чорноволом у передачі "Вибори президента України: звідки беруться рейтинги кандидатів?" радіостанції Свобода:
"У мене, скажімо, перед моїми першими виборами у 2000 році теж проводилися соціологічні дослідження, і потім вони співпали з точністю до пів відсотка з кінцевим результатом. Але ми цей результат абсолютно засекречували. Вони б завдали великої шкоди, їх поява на зовні. Якби їх побачили, ними могли б скористатися мої опоненти. Те, що є на сьогодні, що оприлюднюється на 99% - це є абсолютно політична реклама."
Пан Чорновіл, як на мене, дещо суперечить самому собі - адже з одного боку говорить, що рейтинги можуть дати дуже точний результат, а з иншого, що це цілковита реклама.
Так, рейтинг може використовуватись як показник ефективності проведення виборчої кампанії кандидатом, тобто для аналізу, контролю за нею. Але може використовуватись і як засіб агітації, тобто сам бути елементом виборчої кампанії. Звичайно при використанні у цій останній ролі, можуть бути спроби "підправити" результати рейтинга на користь певного кандидата, аби справити на виборчця бажане (але хибне) враження.
Проте я не вважаю, що ті дані не варті жодної уваги (в противному разі навіщо було б потрібним мое дослідження? :). На мою думку, хоча ті дані і можуть бути подеколи "підправленими", а инколи й грубо сфальшованими, все ж таки збебільшого вони відбивають декотрі тенденції, що мають місце у дійсності, особливо якщо ставитись до них критично і розглядати отримані рейтинги комплексно, з урахуванням даних, отриманих різними закладами.
"Рейтинги, як явище в рекламі є, на мій погляд, повним безглуздям і розраховане на дуже дурного і неперебірливого виборця, який би мав діяти за принципом стада. Ага, більшість за того кандидата, значить я маю йти як більшість, аби не опинитися в меншості не дай Боже. Знаєте, я б хотів, щоби нарешті такий підхід до наших громадян припинився."
Гадаю, що пан Чорновіл дещо перебільшує вплив рейтингів на формування громадської думки. Так само гадаю, що принцип стада набагато більшою мірою виявляється в тому, що люди при абсолюно провальній, злочинній політиці уряду Януковича однаково віддають йому доволі значну кількість голосів, керуючись вочевидь не так своїм розумом, інтересами, майбутнім, як своїми страхами, викликаними залякуванням з боку влади.
А що стосується публікації рейтингів, то звісно можна припускати, що коли розраховується на суспільну увагу, то небезпека спотворення даних набагато більша, ніж для рейтинга "для внутрішнього використання". Але знову ж таки, якщо є кілька закладів, які проводять рейтингові опитування, і кожен з них береже свою репутацію, то це зосвім не ті умови, що заохочують свідоме спотворення даних, хіба можливо в межах статистичної похибки - але навряд більше.
"І тому кожному виборцю, кожній людині я пораджу просто не звертати увагу на те, що там друкується із значком відсотків, а оцінювати кандидата за зовсім іншим принципом. Що я сподіваюся від цієї людини, що вона може зробити, що вона вже зробила?"
Висновок з яким важнко не погодитися. Вибирати справді потрібно, спираючись на щось більш певне і значиме ніж результати рейтингу. Бо той комп'ютер, що у голові у кожної людини (так, можливо, не всі його використовують) далебі і досі у багатьох областях куди потужніше за сучані терабайтно-терафлопові монстри. Намагайтесь думати самостійно і хай вам (у тому :) щастить!
После приведения чисел рейтингов, мне хочется сделать несколько замечаний относительно самих рейтингов а также относительно их восприятия. При этом я использую слова сказание Тарасом Чорноволом в передаче "Выборы президента Украины: откуда берутся рейтинги кандидатов?" радиостанции Свобода:
"У меня, скажем, перед моими первыми выборами в 2000 году также проводились социологические исследования, и потом они совпали с точностью до пол процента с окончательным результатом. Но ми этот результат абсолютно засекречивали. Они бы нанесли большой вред, их появление вовне. Если бы их увидели, ними могли бы воспользоваться мои оппоненты. То, что есть на сегодня, что публикуется на 99% это полностью политическая реклама."
Господин Чорновил, по моему мнению, несколько противоречит самому себе - ведь с одной стороны говорит, что рейтинги дали очень точный результат, а с другой, что это только лишь реклама.
Да, рейтинг может использоваться как показатель эффективности проведения избирательной кампании кандидатом, то есть для анализа, контроля за ней. Но может использоваться и как средство агитации, то есть сам может быть элементом избирательной кампании. Конечно при использовании в этой последней роли, могут быть попытки "подправить" результаты рейтинга в пользу определенного кандидата, чтобы произвести на избирателя желаемое (но ошибочное) впечатление.
Однако я не считаю, что те данные не стоят какого бы то ни было внимания (в противном случае зачем было бы нужным мое исследование? :). По моему мнению, хотя те данные могут быть иногда "подправленными", а иногда и грубо сфальсифицированными, все таки в основном они правильно отражают некоторые тенденции, особенно если относиться к ним критически и рассматривать полученные рейтинги комплексно, с учетом данных из разных источников.
"Рейтинги, как явление в рекламе, являются, на мой взгляд, полной бессмыслицей и рассчитаны на очень глупого и нетребовательного избирателя, который бы действовал по стадному принципу. Ага, большинство за того кандидата, значит я должен поступать как большинство, лишь бы не оказаться в меньшинстве, не дай Бог. Знаете, я бы хотел чтобы такой подход к нашим гражданам прекратился."
Полагаю, что господин Черновил несколько преувеличивает влияние рейтингов на формирование общественного мнения. Также считаю, что стадный принцип проявляется намного более в том, что люди при совершенно провальной, преступной политике правительства Януковича все равно отдают ему достаточно значительное число голосов, руководясь не так своим умом, интересами, будущим, как своими страхами, вызванными запугиванием со стороны власти.
А что касается публикации рейтингов, то конечно можно предположить, что когда рассчитывается на внимание общества, то опасность искажения данных намного более, чем для рейтинга "для внутреннего пользования". Но опять же, если есть несколько учреждений, которые выполняют рейтинговые опроси и каждое из них дорожит своей репутацией, то это совсем не те условия, которые могли бы вызвать желание сознательно исказить результаты, разве что в пределах статистической погрешности - но вряд ли более.
"И поэтому каждому избирателю, каждому человеку я посоветую просто не обращать внимания на то, что там печатается со значком процентов, а оценивать кандидата за совсем отличным принципом. Чего я ожидаю от этого человека, что он может сделать, что он уже сделал?"
Вывод с которым трудно но не согласиться. Выбирать на самом деле нужно, опираясь на что то более определенное и значительное чем результаты рейтинга. Потому что тот компьютер, который находиться в голове у каждого человека (да, возможно не все его используют) действительно и сейчас в большинстве областей куда мощнее чем современные терабайтно-мегафлоповые монстры. Пытайтесь думать самостоятельно и пусть вам (в этом :) везет!
Російсько-український кордон. На прикордонному пості російський і український прикордонники.
Український прикордонник:"Оце дивлюся я на вашу кацапську заставу, на як були ви кацапи замазюри, так і лишилися. Напльовано, нахарькано, усе загаджене й засране. Не те шо ось, у мене. І прибрано, і чистенько, і знову ж - сонечко над нами сильніше світить і гріє."
Російський прикордонник: "Все это ху*ня. Зато мы народ радушный, добрый, не то шо вы. Он у нас на границе над дорогой транспарант - "ДОБРО ПОЖАЛОВАТЬ!" А у вас транспарант, и шо написано? - (читає вголос) "НЕ*УЙ ШАСТАТЬ".
Український прикордонник у паніці вибігає з будки, дивиться на свій транспарант, читає... зі сміхом відповідає: - "От же ж ти телепень, там же на нашій рідній, солов'їний мові написано - "НЕХАЙ ЩАСТИТЬ!"
Российско-украинская граница. На пограничном посту русский и украинский пограничники.
Украинский погранец: "Оце дивлюся я на вашу кацапську заставу, на як були ви кацапи замазюри, так і лишилися. Напльовано, нахарькано, усе загаджене й засране. Не те шо ось, у мене. І прибрано, і чистенько, і знову ж - сонечко над нами сильніше світить і гріє."
Российский погранец: "Все это ху*ня. Зато мы народ радушный, добрый не то шо вы. Он у нас на границе над дорогой транспарант - "ДОБРО ПОЖАЛОВАТЬ!" А у вас, транспарант, и шо написано? - (читает вслух) "НЕ*УЙ ШАСТАТЬ".
Украинский погранец выбегает в панике из будки, смотрит на свой транспарант, читает... со смеху отвечает:"От же ж ти телепень, там же на нашій рідній, солов'їний мові написано - "НЕХАЙ ЩАСТИТЬ!"
Будьласка, надcилайте ваші листи на адресу les2@ua.fm.
Ваіш листи публікуються тільки при наявності дозволу на таку публікацію. Якщо такий дозвіл відсутній, то автор, при бажанні опублікувати вашого листа, намагатиметься отримати такий дозвіл.
Ваші персональні дані, вказані в листі, публікуються тільки при наявності вашого дозволу на таку публікацію. Проте автор залишає за собою право цитувати а також, при потребі, переповідати зміст ваших листів.
Пожалуйста, отправляйте ваши письма по адресу les2@ua.fm.
Ваши письма публикуются только при наличии разрешения на такую публикацию. Если такое разрешение отсутствует, то автор, при желании опубликовать ваше письмо, будет питаться получить такое разрешение.
Ваши персональные данные, указанные в письме, публикуются только при наличии вашего разрешения на такую публикацию. Однако автор оставляет за собой право цитировать, а также, при потребности, пересказывать содержание ваших писем.
Наразі у мене все і я прощаюся з вами, шановні читачі, до наступного випуску розсилки. На все добре!
Автор розсилки: Олександр Лихо
Пока у меня все и я прощаюсь с вами, уважаемые подписчики, до следующего выпуска рассылки. Всего доброго!
Автор рассылки: Олександр Лыхо
Всі авторські права на оригінальні матеріали, що публікуються в розсилці, належать її автору - Олександрові Лиху (Олександр Лихо), якщо не вказано противного. Проте, я даю вам дозвіл на публікацію згаданих матеріалів при умові, що при їх публікації ви вкажете безпосередньо після або до них авторство, посилання на цю розсилку і посилання на ділянку (веб-сайт) автора Soft навколо.
Все авторские права на оригинальные материалы, которые публикуются в рассылке, принадлежат автору - Олександру Лыхо, если не указано противное. Однако, я даю вам разрешение на публикацию указанных материалов при условии, что при их публикации вы укажете непосредственно после или до них авторство, ссылку на эту рассылку и ссылку на веб-сайт автора Soft навколо.
очима пересічного українця
http://subscribe.ru/
http://subscribe.ru/feedback/ |
Подписан адрес: Код этой рассылки: state.politics.president |
Отписаться |
В избранное | ||