Контроль Качества Социальных Обследований (Quality Control of Social Surveys)

91 Pages Posted: 13 Oct 2015

See all articles by Dmitriy Rogozin

Dmitriy Rogozin

Russian Presidential Academy of National Economy and Public Administration (RANEPA) - Institute of Social Analysis and Forecasting

Anna Ipatova

Russian Presidential Academy of National Economy and Public Administration (RANEPA) - Laboratory of Social Research Methodology

Date Written: September 17, 2015

Abstract

Russian Abstract: В первой главе представлены результаты экспериментального плана, который заключался в том, чтобы пройти по маршрутам личного опроса (общенациональный репрезентативный опрос на 9500 респондентов, проводила одна из ведущих опросных компаний России) и дойти до самих респондентов. Мы смогли переговорить с жителями указанных в качестве опрошенных квартир, а также с их соседями, и не нашли ни одного респондента.

Во второй главе мы проанализировали саму выборку по Москве, попавшие в неё административные округа и районы, все адреса и маршруты по всем имеющимся у нас источникам. После того, как был обнаружен несуществующий дом, мы отдельно проверяли наличие всех включённых в реализованную выборку домов на карте Москвы. Мы не просто проходили маршрут в поиске респондентов, а фиксировали и проверяли все обращения, указанные в маршрутных листах интервьюерами опросной компании. Задача состояла в оценке уровня достижимости и усилий, которые затрачивали интервьюеры для опроса нужного количества респондентов, попавших в маршрутную выборку. Вновь обнаружились массовые фальсификации и фабрикации. Для этого отобрали наиболее «чистые» по всей документации маршруты и повторили их. Процесс отбора чистых маршрутов, а также их анализ и результаты повторных обращений подробно изложены в третьей главе.

Четвертая глава представляет результаты третьего экспериментального плана, когда наши сотрудники устроились работать в ведущую российскую опросную компанию интервьюерами для проведения поквартирных опросов. Задача была понять, насколько фабрикации и фальсификации закреплены на институциональном уровне, что происходит внутри самой опросной «машины», как организована методическая работа с интервьюерами и каков статус этих работников.

Последняя, пятая глава, представляет собой методические рекомендации для проведения поквартирных опросов при помощи компьютеризированных технологий. Фиксация параданных в автоматизированных опросах – один из выходов в сложившейся ситуации со ставшим уже традиционным нарушением исследовательской этики в массовых опросах. Мы предлагаем список переменных, которые должны присутствовать в программном обеспечении электронных устройств для соблюдения определенной «чистоты» полевой работы и борьбы с массовыми фальсификациями и фабрикациями.

English Abstract: The first chapter presents the results of a pilot plan, which consisted in the fact that the routes pass personal interview (a national representative survey of 9,500 respondents conducted one of the leading Russian companies questionnaires) and walk to the respondents. We were able to talk with the residents of these apartments as the respondents, as well as with their neighbors, and have not found one respondent.

In the second chapter we analyzed a sample of Moscow itself, trapped in her administrative districts and regions, all the addresses and routes for all sources available to us. Once the house was found a non-existent, we separately tested the presence of all included in realized sample of houses on the map of Moscow. We do not just pass route in search of the respondents, and recorded and checked all references listed in the itinerary interviewers polling company. The objective was to assess the level of accessibility and effort spent by interviewers to survey the desired number of respondents belonging to a route selection. The newly discovered mass falsification and fabrication. To do this, we selected the most "clean" throughout the document and reiterated their routes. The process of selecting the net routes, as well as their analysis and results of repeated appeals are detailed in the third chapter.

The fourth chapter presents the results of the third pilot plan, when our employees get to work in the leading Russian company Polling interviewers to conduct door-polls. The objective was to understand how the fabrication and falsification fixed at the institutional level, what is happening inside the polling "machine," as organized and methodical work with the interviewers and what is the status of these workers.

Last, the fifth chapter is the guidelines for conducting surveys door-using computerized technology. Fixing paradata automated polls - one of the outputs of the current situation with the now traditional violation of research ethics in mass surveys. We offer a list of variables that must be present in the software of electronic devices to comply with certain "purity" of the field work and the fight against mass falsifications and fabrications.

Note: Downloadable document is in Russian.

Keywords: social surveys, quality control, контроль качества, социальные обследования

Suggested Citation

Rogozin, Dmitriy and Ipatova, Anna, Контроль Качества Социальных Обследований (Quality Control of Social Surveys) (September 17, 2015). Available at SSRN: https://ssrn.com/abstract=2664597 or http://dx.doi.org/10.2139/ssrn.2664597

Dmitriy Rogozin (Contact Author)

Russian Presidential Academy of National Economy and Public Administration (RANEPA) - Institute of Social Analysis and Forecasting ( email )

Prechistenskaya naberezhnaya 11
Moscow, Moscow 119034
Russia

Anna Ipatova

Russian Presidential Academy of National Economy and Public Administration (RANEPA) - Laboratory of Social Research Methodology ( email )

Moscow
Russia

Register to save articles to
your library

Register

Paper statistics

Downloads
7
Abstract Views
265
PlumX Metrics