2.2 Описание возможных проблем, возникающих при проведении опроса с использованием специализированной анкеты среди разных социальных групп граждан и пути их решения
Анализ отчетов организаторов опросов в регионах позволяет выделить следующие трудности, возникшие в ходе проведения опроса, а также использования инструментария.
Трудности при проведении опроса в разных типах поселений
Основные сложности, возникающие во время проведения социологического опроса, были связаны с наличием кодовых замков в многоквартирных домах, высоких заборов и с отсутствием звонков на воротах в сельских населенных пунктах, что затрудняло доступ к квартирам и домам респондентов.
Возникали также трудности, связанные с отсутствием желания респондентов участвовать в социологическом опросе по причине отсутствия веры в анонимность опроса.
Проведение опроса совпало с проведением предвыборной компании, что создавало дополнительные затруднения: интервьюеров принимали за агитаторов и респонденты неохотно шли на контакт.
Трудности заполнения анкет (общие и конкретные замечания)
Некоторые формулировки вопросов анкеты были сложны для восприятия респондентами: длинные с большим количеством терминов и незнакомых понятий, в частности «многофункциональный центр», «административный регламент».
В сельской местности мало людей готовы грамотно и по существу ответить на все вопросы анкеты по данной тематике.
Респонденты, отвечая на вопросы по государственным и муниципальным услугам, полученным в 2010 году или в начале 2011 года, плохо помнят временные и количественные параметры получения данной услуги (сколько времени они затратили, количество обращений). Для получения объективной картины рекомендуется проводить опрос о качестве предоставления услуг, предоставляемых в течение текущего года.
Не всегда респонденты могли определить, в какой орган государственной власти или муниципального управления они обращались за получением услуги.
В связи с большим объемом анкеты респонденты уставали к концу опроса и становились невнимательными.
Неясным для респондентов являлось выражение «запрос (документы)» в вопросах №9, 13, 16, 17, 19, 20, 23.
Сложны для восприятия многовариантные вопросы №№26, 47 и 48 с большим количеством перечислений вариантов ответа, в связи с чем, удобнее эти вопросы представлять респондентам на карточках.
Респонденты старались уклониться от ответа на вопрос №25 о сумме негласного вознаграждения.
2.3 Предложения по созданию системы сбора отзывов о качестве и эффективности проведения опроса с использованием специализированной анкеты
Система сбора отзывов о качестве и эффективности проведения опроса предполагает оценку качества инструментария, его соответствия задачам исследования, сформированным в Техническом задании, адекватности и эффективности полученных результатов.
В эту систему должно входить следующее:
1. Оценка респондентами опросного листа (анкеты), с точки зрения его ясности и простоты заполнения. Для реализации этого пункта необходимо проведение апробации опросного листа, т.е. проведение качественных исследований (фокус-групп) с представителями всех социально-демографических групп и слоев российского населения.
В ходе групповых дискуссий вопросы анкеты обсуждаются по следующим направлениям:
Общее восприятие анкеты, логика и структура анкеты, возможность самозаполения;
Трудности с формулировкой вопросов у респондентов (понятность/непонятность вопросов, необходимость дополнительных пояснений);
Трудности с ответом у респондентов (не понятны формулировки вариантов ответа, недостаточность вариантов ответа, сложность дать однозначный ответ или указать количественные параметры);
Замечания, предложения, пожелания по формулировке вопроса и (или) форме записи ответа.
2. Введение в анкету блока вопросов, позволяющих респондентам комментировать и отмечать основные трудности, возникающие при ее заполнении (замечания, предложения по формулировке вопросов и ответов).
3. Оценка интервьюерами полноты, ясности и однозначности инструкций по проведению опроса и отбора респондентов, восприятия опросного листа. В этой связи необходимо проведение апробации инструкций, опросного листа посредством проведения качественных исследований (фокус-групп) с интервьюерами.
В ходе групповых дискуссий с интервьюерами инструментарий обсуждается по следующим направлениям:
Замечания, предложения, пожелания по структуре опросного листа, его восприятию, формулировкам вопросов и (или) форме записи ответов;
Замечания, предложения, пожелания по инструкциям (полнота и понятность).
4. Предоставление в обязательном порядке отчета интервьюера и организатора опроса в регионах о проблемах или трудностях, возникающих при проведении опроса, использовании инструментария.
Краткий отчет включает:
Проверенный массив анкет с указанием кода региона;
Количество респондентов, отказавшихся участвовать в опросе и мотивы отказа;
Количество респондентов, не попадающих под требования опроса: не получавших государственные или муниципальные услуги в текущем и прошлом годах по субъекту и по каждому типу поселения;
Доля осуществленного телефонного контроля, в % от всего массива;
Доля осуществленного выборочного адресного контроля, в % от всего массива;
Трудности при проведении опроса в разных типах поселений (центр субъекта РФ, средний город, село).
5. Для оценки валидности инструментария, его эффективности (оценка полученных результатов), соблюдения научных стандартов при проведении опросов необходимо получение экспертных заключений (не менее двух) от специалистов в области тематики исследования и социологов, занимающихся данной проблематикой.
В экспертных заключениях должна содержаться оценка:
Валидности анкеты, ее содержательности;
Логики и структуры анкеты;
Формулировок вопросов, их ясности и однозначности;
Валидности используемых шкал измерения;
Соблюдения научных стандартов проведения опроса (требований к процедуре интервью, обоснование выборочной совокупности, разработка инструкций, квалифицированный персонал);
Результатов опросов.
|
