Погрешность в 75%: откуда она берётся
Jan. 20th, 2016 12:56 pmСвежий опрос «Левада-центра» показал, что 70% россиян считают необходимым отказаться от поездок за границу в связи с возникшими «проблемами безопасности». При этом 65% респондентов и так за последние 5 лет никуда за пределы СНГ не выезжали. Об этом говорится в опубликованных сегодня результатах декабрьского исследования социологической службы.

Составители опроса по своему обыкновению уверяют, что погрешность в нём не превышает 3,4%, но в это уже никак невозможно поверить. Согласно опросу «Левада-центра», 35% россиян выезжали за границу за последние 5 лет. Меж тем, в начале 2014 года обеспеченность россиян заграничными паспортами ФМС оценивала в 10-15% от общей численности населения страны. В последующие годы неоднократно появлялись сообщения миграционной службы о резком сокращении спроса россиян на этот документ — в одном только январе 2015 года доходы ФМС от сбора пошлин за выдачу загранпаспорта сократились на полмиллиарда рублей. При этом из паспортов, выдаваемых сроком на 5 лет, 20% ежегодно становятся недействительными, то есть 2-3 миллиона выдаваемых ФМС документов приходится не на вновь обратившихся, а на замену.
В сухом остатке имеем простую ситуацию. Из «репрезентативной выборки» социологов загранпаспортом в последние 5 лет пользовались 35% взрослого населения, а по данным ФМС этим документом обеспечено сегодня не больше 20% россиян. То есть погрешность измерения по этому параметру больше похожа на 75%, чем на 3,4% (даже без учёта умерших граждан, уехавших на ПМЖ, потерявших паспорт и тех, кто оформил его в ФМС, но затем не получил визы и никуда не поехал — все они входят в статистику миграционной службы как держатели ОЗП, но не могут входить в те самые 35% респондентов «Левада-центра», побывавших за границей).
Одной из причин такого вопиющего несоответствия между числом выданных паспортов и числом респондентов, ими воспользовавшихся, может быть прямая фальсификация в ходе проведения опросов. Борьба с нерадивыми интервьюерами, заполняющими опросные листы от балды, привлекающими к опросу личных знакомых по договорённости, или вовсе вымышленных лиц — это функция денег. А инвестировать дополнительные средства в повышение достоверности своих гаданий на кофейной гуще наши придворные социологи в нынешней экономической ситуации вряд ли готовы. Тем более если вспомнить, какие прогнозы по результатам выборов им в прошлые годы сходили с рук.
Но самая большая проблема — это, конечно, выборка. Теоретически взгляды 1600 россиян в 48 регионах могли бы, наверное, отражать мнение 146 миллионов в 85 субъектах Российской Федерации. Однако же практическая реализация этого шанса зависит от подхода к составлению выборки — параметра, который мы никак не можем проконтролировать при оценке правдивости полученных данных. Остаётся ориентироваться на результат, сверяя ответы 1600 респондентов с объективными данными (результаты выборов, аппаратная статистика по числу интернет-пользователей, данные ФМС о выданных загранпаспортах). И каждый раз, когда мы такую сверку проводим, то погрешность оказывается больше похожа на 75%, чем на заявленные 3,4%.

Составители опроса по своему обыкновению уверяют, что погрешность в нём не превышает 3,4%, но в это уже никак невозможно поверить. Согласно опросу «Левада-центра», 35% россиян выезжали за границу за последние 5 лет. Меж тем, в начале 2014 года обеспеченность россиян заграничными паспортами ФМС оценивала в 10-15% от общей численности населения страны. В последующие годы неоднократно появлялись сообщения миграционной службы о резком сокращении спроса россиян на этот документ — в одном только январе 2015 года доходы ФМС от сбора пошлин за выдачу загранпаспорта сократились на полмиллиарда рублей. При этом из паспортов, выдаваемых сроком на 5 лет, 20% ежегодно становятся недействительными, то есть 2-3 миллиона выдаваемых ФМС документов приходится не на вновь обратившихся, а на замену.
В сухом остатке имеем простую ситуацию. Из «репрезентативной выборки» социологов загранпаспортом в последние 5 лет пользовались 35% взрослого населения, а по данным ФМС этим документом обеспечено сегодня не больше 20% россиян. То есть погрешность измерения по этому параметру больше похожа на 75%, чем на 3,4% (даже без учёта умерших граждан, уехавших на ПМЖ, потерявших паспорт и тех, кто оформил его в ФМС, но затем не получил визы и никуда не поехал — все они входят в статистику миграционной службы как держатели ОЗП, но не могут входить в те самые 35% респондентов «Левада-центра», побывавших за границей).
Одной из причин такого вопиющего несоответствия между числом выданных паспортов и числом респондентов, ими воспользовавшихся, может быть прямая фальсификация в ходе проведения опросов. Борьба с нерадивыми интервьюерами, заполняющими опросные листы от балды, привлекающими к опросу личных знакомых по договорённости, или вовсе вымышленных лиц — это функция денег. А инвестировать дополнительные средства в повышение достоверности своих гаданий на кофейной гуще наши придворные социологи в нынешней экономической ситуации вряд ли готовы. Тем более если вспомнить, какие прогнозы по результатам выборов им в прошлые годы сходили с рук.
Но самая большая проблема — это, конечно, выборка. Теоретически взгляды 1600 россиян в 48 регионах могли бы, наверное, отражать мнение 146 миллионов в 85 субъектах Российской Федерации. Однако же практическая реализация этого шанса зависит от подхода к составлению выборки — параметра, который мы никак не можем проконтролировать при оценке правдивости полученных данных. Остаётся ориентироваться на результат, сверяя ответы 1600 респондентов с объективными данными (результаты выборов, аппаратная статистика по числу интернет-пользователей, данные ФМС о выданных загранпаспортах). И каждый раз, когда мы такую сверку проводим, то погрешность оказывается больше похожа на 75%, чем на заявленные 3,4%.
no subject
Date: 2016-01-20 10:00 am (UTC)no subject
Date: 2016-01-20 10:10 am (UTC)10-15% на сленге чиновников может означать 5-50%.
(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2016-01-20 10:05 am (UTC)no subject
Date: 2016-01-20 10:16 am (UTC)http://tchaykovsky.ru/blog_b/putpriglas.htm
(no subject)
From:no subject
Date: 2016-01-20 10:05 am (UTC)no subject
Date: 2016-01-20 10:08 am (UTC)> ЗА ГРАНИЦЕЙ (ЗА ПРЕДЕЛАМИ БЫВШЕГО СССР)
(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2016-01-20 10:14 am (UTC)no subject
Date: 2016-01-20 10:50 am (UTC)так от чего сам Левада скоропостижно скончался перед выборами ? ?
(no subject)
From:(no subject)
From:no subject
Date: 2016-01-20 10:14 am (UTC)no subject
Date: 2016-01-20 10:28 am (UTC)И, кстати, в данном случае я не вижу ФМС никакого резона занижать число выданных загранпаспортов, как тут предположили некоторые.
(no subject)
From:no subject
Date: 2016-01-20 10:15 am (UTC)no subject
Date: 2016-01-21 04:31 pm (UTC)А то повадились...
no subject
Date: 2016-01-20 10:16 am (UTC)Они не знают, сколько у нас россиян? Или выдают паспорта без счёта??
no subject
Date: 2016-01-20 10:16 am (UTC)no subject
Date: 2016-01-20 10:20 am (UTC)(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:(no subject)
From:no subject
Date: 2016-01-20 10:24 am (UTC)no subject
Date: 2016-01-20 10:27 am (UTC)no subject
Date: 2016-01-20 10:36 am (UTC)no subject
Date: 2016-01-20 10:41 am (UTC)явно несопоставимая
может, врать народ массово начал, или формулировку вопроса сменили?
no subject
Date: 2016-01-20 10:52 am (UTC)http://dolboeb.livejournal.com/2906896.html?thread=246481424#t246481424
no subject
Date: 2016-01-20 10:47 am (UTC)А мне кажется правдоподобным, что 70% считают необходимым отказаться от поездки за границу тем 30%, кто туда ездит...
no subject
Date: 2016-01-20 11:20 am (UTC)no subject
Date: 2016-01-20 10:53 am (UTC)no subject
Date: 2016-01-20 11:13 am (UTC)турукляндию с иджыптом кремляди запретили, и фсё, остальное не по карману
no subject
Date: 2016-01-20 12:01 pm (UTC)А недавно каталась в Китай. Денег у нее практически нет.
(no subject)
From:no subject
Date: 2016-01-20 11:16 am (UTC)- в опросе обычно участвуют только взрослые среднего возраста
- а всё население страны включает ещё кучу ДЕТЕЙ и СТАРИКОВ
Поэтому вполне естественна ситуация, когда за рубежом были 35% "опрошенных в возрасте от 18 лет" (и скорее всего, не старше 70 лет), но при этом паспортами обеспечено лишь 20 процентов ВСЕГО населения (и младше 18, и старше 70).
И это не какая-то специальная фальсификация: возраст опроса "от 18 лет" явно указан в публикации. Хотя то, что не указана нижняя граница возраста опрошенных - это действительно косяк. Но в любом случае, чтобы получить такие результаты, совершенно не нужно специально подделывать данные опроса.
no subject
Date: 2016-01-20 12:18 pm (UTC)(no subject)
From:no subject
Date: 2016-01-20 11:18 am (UTC)no subject
Date: 2016-01-20 11:40 am (UTC)наиболее легко соглашаются с ящиком, что от поездок стОит воздержаться всем.
обмана нет.
логично бы считать процент только среди тех, кто реально ездит.
no subject
Date: 2016-01-20 01:04 pm (UTC)no subject
Date: 2016-01-20 11:58 am (UTC)а левада-центр делает выборку по прохожим на улице.
no subject
Date: 2016-01-20 12:09 pm (UTC)Это с учетом что с Носиком я почти всегда НЕ согласен
Но здесь - соврешшно точно он поймал "социологов" за руку. Даже смешно получилось.
Да, проблема в выборке. В её количестве (математики, молчать), в размере базы (молчать, я сказал), в сите (шат ап). На каждом этапе из-за нерадивости, пофигизме и подгонке накапливается ошибка. По мелочи. В итоге - почти любой опрос трижды нерепрезентативен.
Выход?
пишите не 1600 фокусгруппы, а 160000 базы. И не экстраполируйте ФГ на базу, а уж потрудитесь сделать выборку реально на 3 порядка шире.
(no subject)
From:no subject
Date: 2016-01-20 12:37 pm (UTC)no subject
Date: 2016-01-20 01:04 pm (UTC)Сколько еще таких? Вот и погрешность в 75%
no subject
Date: 2016-01-20 02:29 pm (UTC)no subject
Date: 2016-01-20 01:10 pm (UTC)no subject
Date: 2016-01-20 01:17 pm (UTC)no subject
Date: 2016-01-20 02:30 pm (UTC)no subject
Date: 2016-01-20 01:41 pm (UTC)no subject
Date: 2016-01-20 02:13 pm (UTC)