Тема 3.5.: Методология оценивания
Показатели качества оценочного исследования. Дескриптивный, коррелятивный и каузальный типы исследования. Конструирование программы исследования (дизайн исследования): экспериментальный, квази-экспериментальный, не экспериментальный дизайны. Понятие валидности и надежности.
Оптимизация методологии проведения оценки. Выборка: понятие, подходы к формированию, факторы, влияющие на формирование.
Типы данных. Количественные и качественные методы в оценивании. Классификация и обзор методов сбора информации, используемых при проведении оценки программ: интервью, анкетирование, наблюдение, изучение документации и др. Методы анализа данных, полученных в ходе оценивания (статистические и нестатистические методы).
Основная литература:
Кузьмин А.И. Что такое программа или проект. в кн. Оценка программ: методология и практика. Под ред. А.И. Кузьмина, Р. О'Салливан, Н.А. Кошелевой. – М.: Издательство «Престо-РК», 2009
Кузьмин, А. (2011). Логическая согласованность компонентов программы как фактор ее эффективности. Журнал "Проектирование, мониторинг и оценка"(1).
Program Evaluation Methods: Measurement and Attribution of Program Results. 3d Edition. 2000.
Дополнительная литература:
Ядов В. Стратегия социологического исследования. Описание, объяснение, понимание социальной реальности. М., "Добросвет", 1998.
Funnell, S. C., & Rogers, P. J. (2011). Purposeful program theory : effective use of theories of change and logic models (1st ed.). San Francisco, CA: Jossey-Bass.
Patton, M.Q., Qualitative research and evaluation methods (3rd. ed.). Thousand Oaks: Sage, 2001.
Weiss, C. H. (1995). Nothing as Practical as Good Theory: Exploring Theory-based Evaluation for Comprehensive Community Initiatives for Children and Families. In James Connell et al. (Ed.), New Approaches to Evaluating Community Initiatives: Concepts, Methods, and Contexts. Washington, DC: Aspen Institute.
Тема 3.6.: Планирование и этапы оценочного исследования
Этапы проведения оценивания: восприятие необходимости проведения оценки, постановка задачи, определение ключевых вопросов исследования, разработка методов исследования (качественные, количественные, комбинирование), определение методов сбора информации, дизайн оценивания, сбор данных, анализ данных, документирование результатов оценки - подготовка отчета, «обратная связь» по результатам оценки, принятие решения - практическое использование результатов оценки.
Диспозиции участников оценки: «заказчик», «консультант-оценщик», «объект оценки», «сопричастные лица», «основные и потенциальные пользователи результатов оценки». Выстраивание взаимоотношений между участниками процесса оценки на этапе постановки задачи. Ответственность консультанта-оценщика. Структура технического задания на проведение оценки.
Выбор методов и разработка инструментария оценки. Определение объема работ и формирование плана-графика проведения оценки.
Аналитический цикл: факты-интерпретации-выводы-рекомендации. Формирование и проверка гипотез. Определение объема данных, достаточного для проведения анализа. Сложные ситуации при анализе данных. Построение моделей при недостаточности информации.
Написание отчета, ориентированного на пользователя. Общая структура отчета. Язык отчета. Логика изложения. Разделение текста на блоки. Графическое оформление отчета. Типичные ошибки при написании отчетов. Презентация отчета.
Закономерности восприятия результатов оценки. Принципы построения и осуществления «обратной связи», ориентированной на поддержку и развитие. Сопротивление заказчика и среды, работа над преодолением сопротивления. Типичные ошибки взаимодействия.
Основная литература:
Баханькова Е.Р., Бодунген А.Ю., Боровых А.Э., Грешнова Е.В., Гриднева П.В., Казаков О.Б., Кузьмин А.И. Оценка проектов и программ: курс лекций. Школа управления НКО. М.: ЦПНКО, 2003.
Кузьмин А.И. Оценка проектов и программ. М., ПРЕСТО-РК, 2005 г.
Дополнительная литература:
Shapiro J. Evaluation: Judgement Day or Management Tool? - Olive, 1996.
Bewyl W. Schritt für Schritt: Planung von Evaluationen. - Münster, 2007.
|
