Как получаются нелепые рейтинги Путина и аннексии?

[taki_net]

Я не знаю, все ли понимают, как устроен ЧЕСТНЫЙ опрос общественного мнения (о жульнических опросах от ФОМ и ВЦИОМ я сейчас не буду)? Что такое "опрос N человек по репрезентативной (всероссийской и т.д.) выборке"? Нет, это не результат обработки N ответов от N человек, выбранных так, чтобы их распределение по всем параметрам совпадало с всероссийским. Я сейчас отвлекусь от проблемы репрезентативности (очень сложной) и рассмотрю только самый простой вопрос - количественный. Чтобы получить N ответов, надо опросить (выдать анкет, инициировать интервью, произвести звонков...) много, много больше, чем N. Часто в десятки, порой в сотни раз больше. Иными словами, "сырой массив" ответов на вопрос поллстера выглядит так: "отказ от ответа, отказ, отказ, вар. А, отказ, отказ, не знаю, вариант Б, отказ, отказ, отказ, отказ...". Иными словами, если бы результаты опросов публиковались без обработки, как есть - рейтинг крымской авантюры выглядел бы так: "поддерживают решение Президента 7% опрошенных, 2% осуждают, остальные не сформировали своего отношения..."

Поллстеры на основе опыта (о котором ниже) исходят из предположения, что отказ от ответа - не одна из разновидностей позиции, а независимое поведения; иными словами, что не ответившие, на самом деле, имеют позицию по теме опроса, и ее можно с некоторой точностью предсказать на основе "видимого" меньшинства анкет. "Нулевой" вариант такого предсказания - простое исключение отказавшихся от ответа и подведения итога на основе полных анкет/интервью (я отвлекаюсь от того, что само множество ответивших будет не соответствовать генеральной выборке по возрасту, полу, доходу и т.п. параметрам, и его придется нормировать, то есть разбивать на группы и завышать или занижать ценность ответов недопредставленных или перепредставленных групп - это, как я уже отметил, отдельная сложная проблема, а нам бы разобраться с легкой.

Безопасно ли применять "нулевой вариант"? Легко видеть, что он основан на предположении, что в огромном массиве отказных анкет истинное распределение позиций ТОЧНО такое же, как в маленьком массиве отвеченных. Но это очень подозрительная гипотеза; ответившие принадлежат к экзотическому меньшинству "ненормально коммуникативных" людей; а всякое меньшинство, особенно предопределенное свободным выбором, подозрительно на необычность и еще по куче параметров. Кроме подозрительности, есть и прямое возражение: совершенно очевидно, что процент "не определившихся с ответом" между вариантами А и Б среди ответивших должен быть МНОГО НИЖЕ, чем среди отказников. Если вопрос опроса сложен, далек или неинтересен - в высшей степени неестественно все же отвечать на анкету, а не уходить в отказ. Иными словами, как минимум процент ответа "не знаю" среди идеальной выборки должен быть много выше, чем в "сырых" неотказных анкетах. Кстати, на опросе ФОМ+ВЦИОМ таки да, было ненормально мало ответов "не знаю".

Следующая тема - опросы можно разделить на два типа: на предсказывающие событие и на "оценки в себе". Пример первого типа - какой молотый кофе предпочитаете, арабику, робусту или молотого не пью? Послезавтра выборы - за кого будете голосовать, за синих или зеленых, или испортите бюллетень, или не пойдете?

Второго типа: верите ли вы в Бога? Как вы относитесь к Господину Президенту (отлично, хорошо, посредственно, плохо, не знаю).

В опросах первого типа наступает "послезавтра", и подсчет голосов (если он принят в этой стране) или цифры продаж покажут, была ли верна нулевая гипотеза, а точнее, какие поправки надо было внести. Часто эти поправки хорошо рационализируются, и их можно при аналогичных опросах выставить заранее, домножая на коэффициенты: так, сторонники бюджетных брендов стесняются и чаще отказываются от ответа, чем сторонники престижных и люксовых, сторонники правящей (или вероятно побеждающей) партии чаще отвечают, а сторонники предполагаемых лузеров - чаще уклоняются от ответа.

А что делать с опросами о поддержке того или иного лидера или тех или иных мер? Никакие "выборы наутро" или "продажи в конце квартала" тут не помогут. Можно применять поправки, заимствованные от недавних выборов, по аналогии - но насколько они аналогичны по интенсивности страху показаться себе (А МОЖЕТ И НЕ СЕБЕ, кто этих поллстеров знает) предателем? Врагом народа?

Иными словами, я утверждаю, что статистические модели - даже с поправками на политическую реальность России, но России прежней, докрымской - неприменимы для определения истинных настроений людей, и даже так называемый "честный" опрос Левады говорит нам только, что большинство людей в России, как и всегда, не готовы делиться своими политическими взглядами. А готовые и при этом поддерживающие власть - составляют меньшинство.

Comments

[yankel.livejournal.com]

Ну вот, а как вы чувствуете? Поддерживают широкие массы это или нет? Я не прошу статистику.

[kireev.livejournal.com]

Вы, конечно, правы, что те, кто не хочет отвечать на вопросы, чаще всего проти власти и не хотят делиться своими реальными настроениями. Это было видно буквально по всем опросам, которые преувеличивали рейтинг власти буквально на всех федеральных выборах (если отбросить фальсификации), причем, по нарастающей.

Я опять-же согласен, что после Крыма желающих делиться своим, отличающимся от официального, мнением, должно стать еще меньше. Кому хочется быть "пятой колонной"? Призывы с такими разобраться звучат постоянно и люди реально становятся неадкеватными. Достаточно почитать отчет grezev http://grezev.livejournal.com/463298.html

Другое дело, какой процент людей не хочет общаться с интервьюерами или же дает фальшивые ответы? Из опросов по Крыму мы этого не узнаем, так что остается только гадать. Лично я считаю, что большинство действительно все это поддерживает и они полностью дезинофрмированы пропагандой, но таковых действительно меньше, чем даже по опросам Левада-центра.

[arhivistka.livejournal.com]

Такой аргументацией можно любой телефонный опрос обесценить.

"ПОЛНОЕ отсусттвие на улицах, в транспорте, в очередях и магазинах разговоров "за" (как минимум один встреченный мной разговор против) - как-то не слишком вяжется с этой картиной."

Люди могут относиться к этому индиффирентно-положительно - как одна моя родственница: пить шампанское она за это не будет, и даже сомневаюсь, что отстегнёт сто рублей на какое-нибудь благотворительное пожертвование для крымчан. Но при этом абсолютно уверена, что "справедливость свершилась".

[stzozo.livejournal.com]

Спасибо, очень грамотно.

Но надо заметить, что если человек стесняется в соцопросе сказать "я против власти", то едва ли он решится какими-то действиями противостоять власти.

[lemsh.livejournal.com]

Здравый смысл говорит, что независимо от российских реальностей метод социологического опроса не позволяет сколько-нибудь разумным образом оценить "истинные настроения людей" (тем более что непонятно, что это такое). Если те, кто проводят эти опросы, утверждают обратное, это значит, что они либо жулики и шарлатаны, либо искренне заблуждающиеся люди.

[gegmopo4.livejournal.com]

Интересно, как отличается процент отказников на опросы о кофе и о Крыме? Сравнивая это для разных вопросов, возможно можно будет оценить какая часть ушла в отказ не из-за природной некоммуникабельности, а не желая давать «не такой» ответ.

[bbb.livejournal.com]

Ключевой пункт твоей схемы - в утверждении

"Чтобы получить N ответов, надо опросить (выдать анкет, инициировать интервью, произвести звонков...) много, много больше, чем N. Часто в десятки, порой в сотни раз больше"

То есть в предположении, что на сто опрошенных реально отвечает, в лучшем случае, десять человек, а "порой" - один на двести-триста-четыреста.

А так ли это? Действительно ли при опросах на политические темы отказываются отвечать от 90 и выше процентов опрошенных?

[bbb.livejournal.com]

Собственно, вот описание того, как устроена выборка Левада-центра - http://www.levada.ru/omnibusnyi-opros

Там 1600 респондентов по 94 городам и 36 сельским районам.

Значит ли это, что на самом деле опрашивающие обходят не 1600 квартир (домов), а в десятки или даже сотни раз больше? Или что на самом деле в результаты включаются ответы всего лишь нескольких десятков респондентов из полутора тысяч?

[ermenegilda.livejournal.com]

Отказываться отвечать тоже страшно. Вдруг посадят за "мещанство".
Я ни на секунду не забываю, что опросы (даже о марках колготок) проводит ЦРУ (это эвфемизм), и если мой ответ ЦРУ (эвфемизм) не понравится, у меня будут проблемы.
Но у меня вообще врожденная паранойя. Я даже на больных детей жертвовать боюсь, пожертвую на ребенка с русской фамилией - посадят за шовинизм, с нерусской - за национал-предательство.

[friendly-fox.livejournal.com]

>>Как вы относитесь к Господину Президенту (отлично, хорошо, посредственно, плохо, не знаю).


вариант ответа - "боюсь даже подумать об этом"

[vaysburd.livejournal.com]

Меня однажды спрашивали про Собяку. Сказал, что отвечать не буду, поскольку эти данные используются для подсчета, сколько нужно вбросить бюллетеней.

[bukvoyeditsa.livejournal.com]

Спасибо, что обратили внимание на эту особенность опросов. Когда читаешь отчёты, то как-то забываешь о великом множестве отказавшихся отвечать. Потому что некогда, не до того, непонятно, что за люди и с какой целью задают вопросы и т.п.
Мне кажется, что огромное большинство "простого народа" не одобряет действия правительства всегда, не вникая, исключительно исходя из своего жизненного опыта. Но делиться своим мнением с незнакомыми людьми не будут. Тоже исходя из опыта.