United Nations Economic Commission for Europe Statistical Division Семинар UNECE по управлению переписью в странах членах SPECA StatCapCA тренинг семинар Nr.1 День 2 – вторая.

Download Report

Transcript United Nations Economic Commission for Europe Statistical Division Семинар UNECE по управлению переписью в странах членах SPECA StatCapCA тренинг семинар Nr.1 День 2 – вторая.

United Nations Economic Commission for Europe
Statistical Division
Семинар UNECE по управлению переписью в
странах членах SPECA
StatCapCA тренинг семинар Nr.1
День 2 – вторая половина дня
Подготовительные задания:
формы и руководства для
переписи
Paolo Valente (UNECE)
Охваченные темы :
1.
2.
3.
4.
Дизайн форм
Тестирование форм
Пособия по инструкциям
Распечатывание форм и других
документов
Использованные материалы:

Руководство по переписи населения и
жилищного хозяйства
(Глава II; части D, E, F)
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 2
1. Дизайн форм

Хорошо составленная форма переписи:
•
•
•

позволяет собрать и охватить данные более эффективно
снижает количество ошибок и улучшает качество
снижает время и расходы на обработку данных
Плохо составленная форма переписи:
•
•
•
сложно заполняется счетчиком или респондентом
может снизить уровень общения с респондентом
влияет на качество сбора данных
 эти проблемы нельзя решить позже во время или после
учета!
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 3
1. Дизайн форм
Типы форм (в зависимости от
методологии):
• индивидуальная
• по домохозяйству
• по жилищной единице
• здание
• коммунальные структуры
• …

05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 4
1. Дизайн форм
Вопросы которые нужно учесть
при составлении форм переписи:
1.
2.
3.
4.
Нагрузка на респондента
Фразировка и формат вопросов
Структура и дизайн формы
Тип и формат используемых форм
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 5
1. Форма дизайна
1.1 нагрузка на респондента
 Нагрузка на респондента должна быть
СВЕДЕНА К МИНИМУМУ, чтобы получить
точную информацию
 Особенно важно где используется метод
самоучета
Факторы влияющие на нагрузку на
респондента:
1. Размер форм
2. Количество и тип вопросов
3. Насколько легко заполнять формы
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 6
1. Дизайн форм
1.2 Фразировка и формат вопросов
Факторы на рассмотрение:
1. Необходимый уровень точности и детальности (в
зависимости от требований пользователей)
2. Использование соответствующего языка для
облегчения понимания
3. Возможность использования стандартных определений
или составления вопроса
4. Система обработки данных
5. Последовательность вопросов
6. Место для каждого из ответов
и…
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 7
1. Дизайн форм
1.2 фразировка и формат вопросов
Факторы на рассмотрение:
…7. Разнообразие языка
Возможные стратегии для разнообразия языка:
• Многоязыковые формы
• Больше вариантов форм, на разных языках
• Формы на одном языке, но готовые переводы
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 8
1. Дизайн форм
1.3 Дизайн и структура форм
 Дизайн и структура форм оказывает прямое влияние на то как
заполняются формы и на точность результата
Самый важный фактор это метод охвата информации:
• Ручной ввод данных
• Сканирование форм + OCR/OMR
 требует специальный формат
НО
 Требования по охвату данных не должны оказывать
отрицательного воздействия на восприятие респондентов
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 9
1. Дизайн форм
1.4 тип и формат используемых форм
Индивидуальные формы или формы по
домохозяйству?
 зависит от принятого метода учета
различные форматы форм по
домохозяйству:
•
•
Буклеты: первый вопрос о человеке 1, потом о человеке 2, 3…
Матрица: вопросы слева, ответы человека в различных
формах
Варианты: использование развернутых и кратких
форм
•
Развернутые формы для домохозяйств в выборке (15-20%)
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 10
1. Дизайн форм
1.4 тип и формат используемых форм
Предложения:
Рассмотрите опыт других стран!
 UNECE в 2003 году разослала всем странам
ECE полный комплект форм переписи
используемый во всех странах ECE во время
раунда 2000-го года
Тем не менее: будьте осторожны с возможным
эффектом одинаковой постановки вопроса на разных
языках и с возможными последствиями ввиду
культурных различий!
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 11
2. Тестирование форм




Тестирование форм должен быть только одним
компонентов более обширной программы
тестирования
Программа тестирования должна эффективно
все основные компоненты переписи:
формы, учет, обработку данных и т.д.
Программа тестирования должна фокусироваться
на первой фазе тестирования форм.
Ключевой элемент программы тестирования это
окончательная пилотная перепись, которая
должная отражать по возможности окончательные
условия переписи
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 12
2. Тестирование форм
Тестирование форм в особенности важно
для новых тем и вопросов
 Важно также протестировать влияние на
другие вопросы, которые уже были в форме
 Если предполагаются изменения в формах,
формы должны быть оценены ДО и ПОСЛЕ
изменений, чтобы выявить привело ли это к
улучшениям

05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 13
2. Тестирование форм
Различные процедуры для оценки
форм:
1. Анализ ошибок
2. Познавательное тестирование
3. Анализ качества и уровня детальности
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 14
2. Тестирование форм
2.1 Анализ ошибок
Анализ ошибок: подсчет количества и типов
ошибок на образцах форм
Цель:
1. Выяснить какие ошибки имели место
2. Дать информацию о возможных изменениях
3. Указать показатели для оценки форм
4. Дать возможность сравнение разных форм
5. Дать прогноз стоимости исправления ошибок
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 15
2. Тестирование форм
2.2 Познавательное тестирование
Познавательное тестирование: Подход


исследования рынка для тестирования форм.
Различные мероприятия, включая:
Исследования фокусных групп (групповое
обсуждение)
Наблюдательные обследования (наблюдения за
респондентами)
Преимущество: дает возможность глубокого
понимания того, как вопросы интерпретируются
респондентами
Недостатки: относительно дорого и основывается
на маленьких образцах
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 16
2. Тестирование форм
2.3 Анализ качества и уровня детальности
Особенно важно для открытых вопросов где
нужно собирать информацию на более
высоком уровне детальности (занятость,
промышленность)
 Фразировка вопросов влияет на детали и в
конце концов на качество результата
 Как часть тестирования, ответы кодируются
для оценки достаточности уровня
детальности

05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 17
3. Пособия по инструкции
3.1 Категории пособий по инструкциям
В общем, различные пособия по различным уровням:
1. Руководство для счетчика
2. Руководство для контролера
3. Руководство для регионального менеджера
 Персонал на каждом уровне должен ознакомиться

также и с пособиями для более низких уровней
Некоторые заголовки могут появиться во всех
пособиях, но с различным содержанием или уровнем
детальности
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 18
3. Пособия по инструкции
3.2 Пособия для счетчиков

Пособие для счетчиков самый важный полевой документ!
•
Оно детально расписывает обязанности и задачи счетчика
•
Оно должно дать счетчику достаточно информации для
независимой работы на полях
Плюсы и минусы: В идеале, оно должно охватывать все случаи
НО
оно не должно быть нагромождено и трудным в
использовании

Правильный баланс: Оно должно охватывать
обычные ситуации на определенном уровне
детальности и давать направление по поведению в
необычных случаях
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 19
3. Пособия по инструкции
3.3 Содержание пособий по
инструкциям
Предлагаемый список содержания для
трех пособий представлен в:
 Руководстве по управлению переписью
населения и жилищного фонда
(Глава II; часть E)
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 20
4. Распечатывание документов
переписи


Распечатывание документов
переписи является ОСНОВНЫМ
мероприятием, ввиду объема работ и
обрабатываемого материала
Время, планирование и координация
процесса распечатывания является
фундаментальным фактором для
успешности переписи
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 21
4. Распечатывание документов
переписи
4.1 Планирование и управление распечатыванием


Самый сложный аспект:
Координация информации необходимой со всех сфер
переписи, которые требуют публикации
В информацию входит:
•
•
•

Детали распечатываемых материалов
Спецификации необходимые для логистики (для упаковки и
т.д.)
Достоверное предположение количества
Ключевая информация для планирования:
•
•
График подготовки всех документов по всем сферам
переписи
График и требования для поставок распечатанных
материалов
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 22
4. Распечатывание документов
переписи
4.1 Планирование и управление распечатыванием
Должна быть разработана система для учета
каждой распечатываемой единицы:
1. Все детали подходящие для получения прогноза
стоимости распечатывания
2. количества
3. прогноз, котировки и фактические затраты

С этой информацией прогноз полной стоимости
распечатывания может обновляться регулярно и
общий бюджет подвергаться мониторингу
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 23
4. Распечатывание документов
переписи
4.2 Планирование и управление распечатыванием
Распечатывание материалов переписи ОЧЕНЬ
важно
Важные вопросы на рассмотрение:

Качество распечатывания форм очень важно
 Методы обработки данных, такие как OCR/OMR
требуют специфичного стандарта в плане
расположения мест для ответов, цветов форм и т.д.

Оценка количества форм для распечатывания

Количество бумаги должно быть оценено заранее,
чтобы бумага необходимого качества была бы в
наличии

Время очень важно, учитывая длительные вопросы
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 24
4. Распечатывание документов
переписи
4.3 Распечатывание других документов переписи
Материалы, которые может быть нужно
распечатать в больших количествах:
 Информационные буклеты распространяемые
счетчиками или распространяемые по домам заранее
 Инструкции для респондентов (для само заполнения)
 Многоязыковые материалы или перевод вопросников
Другие распечатываемые материалы:
 Пособия по инструкциям для счетчиков, контролеров и
т.д.
 Журналы регистрации и книги контроля и формы
 Учебные пособия
 Административные материалы (для найма персонала
переписи, назначения, финансирование и т.д.)
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 25
4. Распечатывание документов
переписи
4.4 Обеспечение и контроль качества
Качество форм переписи важно для успешного
проведения переписи, особенно при использовании
OCR/OMR



Необходимо разработать специфическую
стратегию по обеспечению качества, в том
числе интенсивную форму контроля
качества:
Проверка доказательств (во время разработок материалов):
на каждом этапе разработки, доказательства должны внимательно
проверяться руководителем проекта
Процесс производства (во время распечатывания):
независимая проверка должна проводиться на образцах
распечатанных форм на всем протяжении распечатывания
05 November 2015
Paolo Valente - UNECE Statistical Division
Slide 26