На сколько верны данные социологических опросов?

25.10.2016

Точность соцопросовМногие, вероятно, задавались вопросом - насколько можно доверять социологическим опросам. Как опрошенные полторы тысячи человек могут составить портрет 140 миллионного населения России? С определенной точностью и при правильной выборке респондентов (группе опрашиваемых), действительно, такие оценки могут охарактеризовать общество в целом. Проводимый опрос должен в нужных пропорциях охватывать разные слои и группы населения в разных регионах страны. Определяемый выбор предпочтений для опрашиваемого должен быть хорошо ясен и, достаточно,  несложен. То есть все зависит еще и от правильно поставленного вопроса, и от метода проведения исследований.

Проблема бывает в том, как в реальности проверить насколько точны эти результаты. Есть, конечно, статистические методы, социальные закономерности, но хотелось бы большей определенности. Заодно, полезно было бы оценить насколько хорошо разные организации охватывают аудиторию. Такую возможность, в частности, предоставили недавно проведенные в 2016 году выборы в Государственную Думу.

 

Результаты социологических опросов

В качестве социологической оценки рассматриваются результаты опросов, проведенные тремя компаниями занимающимися социологическими исследованиями в России - "ВЦИОМ", "ФОМ", "Левада-центр". Опросы проводились накануне выборов с целью выяснить политические предпочтения россиян, то есть - кто за какую партию собирается голосовать.

 

Результаты социологического опроса ВЦИОМ

Соцопрос ВЦИОМ

Д а н н ы е   п р е д с т а в л е н ы   н а   о с н о в а н и и   в с е р о с с и й с к и х   о п р о с о в   " Э к с п р е с с " .   В   к а ж д о м   о п р о с е   п р и н и м а л и   у ч а с т и е   1 6 0 0   ч е л о в е к   в   1 3 0   н а с е л е н н ы х   п у н к т а х   в   4 2   о б л а с т я х ,   к р а я х   и   р е с п у б л и к а х   Р о с с и и .   С т а т и с т и ч е с к а я   п о г р е ш н о с т ь   н е   п р е в ы ш а е т   3 , 4 % . 
Источник: ВЦИОМ. (Консолидированная инфографика МИА «Россия сегодня»)

 

Результаты социологического опроса ФОМ

Соцопрос ФОМ

Д а н н ы е   « Ф О М н и б у с »   –   о п р о с   г р а ж д а н   Р Ф   о т   1 8   л е т   и   с т а р ш е .   7 3   с у б ъ е к т а   Р Ф ,   2 0 7   н а с е л е н н ы х   п у н к т а ,   3 0 0 0   р е с п о н д е н т о в .   И н т е р в ь ю   п о   м е с т у   ж и т е л ь с т в а .   С т а т п о г р е ш н о с т ь   н е   п р е в ы ш а е т   2 , 5 % . 
Источник: ФОМ.

 

Результаты социологического опроса Левада-центр

Соцопрос Левада

С т а т и с т и ч е с к а я   п о г р е ш н о с т ь   п р и   в ы б о р к е   1 6 0 0   ч е л о в е к   ( с   в е р о я т н о с т ь ю   0 , 9 5 )   н е   п р е в ы ш а е т :   3 , 4 %   д л я   п о к а з а т е л е й ,   б л и з к и х   к   5 0 % ;   2 , 9 %   -   б л и з к и х   к   2 5 % ;   2 , 0 %   -   б л и з к и х   к   1 0 % ;   1 , 5 %   -   б л и з к и х   к   5 % . 
Источник: Левада-центр.

 

Необходимо произвести перерасчет результатов социологических исследований разных организаций в итоговый процент проголосовавших по четырем основным партиям. Результаты остальных партий находятся за порогом статистической погрешности оценок.

 

Метод пересчета результата социологических исследований

Основная задача - привести к единой системе всех ответивших респондентов, поскольку  социологические компании предоставили разные данные с дополнительными вариантами ответов. Для этого возьмем сумму процентного соотношения ответивших за какую партию они проголосуют за общий объем (за новые 100%), и проведем относительный пересчет для каждой из четырех основных партий. Поскольку "Левада" предоставила неточные оценки по выбору за другие партии, то данное значение можно получить, вычтя из общих 100% ответивших проценты за ведущие 4 партии и проценты по остальным вариантам ответов. Тоже сделаем для результатов ФОМ, поскольку нули явно не отражают точную оценку, а являются результатом округления, что и показывает найденный реальный остаток сделавших выбор за другие партии.

Неопределившиеся сделают свой выбор или не пойдут на голосование, так что их можно, как вариант, равномерно распределить в соответствии с общими результатами соцопроса или исключить. И в том, и в другом случае они не повлияют на распределение при данном методе пересчета.

 

Промежуточные данные пересчета опросов (неопределившиеся респонденты не включены)

Данные пересчета соцопросов

Итоговые результаты выборов

Голосование состоялось 18 сентября 2016 г.

Итоги выборов

Данные из развернутой консолидированной инфографики на основании данных ЦИК РФ. Источник: МИА «Россия сегодня».

 

Оценка точности социологических исследований

Окончательные оценки точности социологических опросов от трех компаний. Приведены рассчитанные показатели опросов и получившиеся отклонения от итоговых результатов выборов.

Оценка точности социологических исследований

Самый точный, даже лучше заявленной статистической погрешности, это опрос ВЦИОМ. Левада, как и положено инocтpaнному aгeнту :-),  недооценила электорат ведущей партии. ФОМ, несмотря на заявляемую большую выборку, наоборот, переоценил. Причины смещения оценок у обоих компаний неясны. И ФОМ и Левада превысили заявляемые погрешности оценок.

 

Сергей Турепин

Смотрите также: Точность социологических опросов в США.