11 ноября Форум Доноров при поддержке АСОПП и ЕВРАЗ провел четвертый воркшоп по оценке.
Ольга Евдокимова (АНО «Эволюция и филантропия») дала участникам теоретическую рамку специфики внутренней оценки и организации ее как процесса. Оценка — мощнейший инструмент обучения и формирования знаний, как внутри, так и за пределами организации (особенно если донор нацелен на распространение результатов своих исследований), накопления коллективного знания о социальных проблемах. Внутренняя оценка предполагает привлечение персонала, который не связан с программой, — в этом ее отличие от самооценивания.
Важно на раннем этапе определиться со своими целями и задачами и выбрать соответствующий вид или подход оценки. Углубленный контекст работы дает процессная оценка, а если вы хотите понять, используются ли ресурсы эффективно, подойдет SROI (через монетизацию социальных результатов и сравнение результата с первоначальными инвестициями), какие изменения произошли в результате программы, ваша программа повлияла на изменения или другой фактор — экспериментальный подход в оценке, почему произошли изменения — теоретический подход.
Одним из серьезных недостатков российского сектора является очень невысокое число отчетов по оценке: исследовани проводятся, но значимые для многих организаций результаты не публикуются. Среди важных терминологических трендов — МОО — мониторинг, оценка и обучение как целое системное направление работы вытесняет просто оценку.
Ольга представила краткий алгоритм создания структурной рамки для МОО:
1. Определите границы, цели и внутренних и внешних пользователей системы, получить видение, ожидания и ограничения со стороны команды организации.
2. Разработайте теорию изменений как основу для плана обучения. Согласуйте внутри команды и с ключевыми стейкхолдерами термины оценки (эффективность/социальные результаты и др.). По словам Ольги, сегодня многие организации составляют некое подобие теории изменений, но последнюю отличает наличие нескольких важных элементов: 1) предположения и допущения, 2) раскрытие причинно-следственных связей, 3) визуальное представление.
3. Разработайте план мониторинга и план оценки, оцените пропорциональность и недостающие ресурсы этих планов, показатели и инструменты сбора данных, ответственных.
4. Составьте план (стратегия обучения, принятия решения на данных, равзития доказательной и обучающей базы) внутреннего обучения/отчетности
5. Составьте план распространения результатов МиО вовне как элемента развития сектора
6. Составьте план развития оценочного потенциала и все то же у грантополучателей/партнеров
Своим практическим опытом организации внутренней оценки поделились коллеги из донорских организаций. Фонд Тимченко ввел институт кураторов из числа самих благополучателей по МиО, развивая не только их экспертность, но и компетенции в организациях-новичках. Среди ключевых принципов системы МиО фонда — вовлечение партнеров, концентрация только на ограниченном числе значимых результатов, гибкость и адаптивность и системы мониторинга, и ее отдельных инструментов, трансляция результатов для использования другими организациями сектора.
Норникель через акселератор для НКО-грантополучателей собирает обратную связь и корректирует платформу, форму заявки на грантовый конкурс, критерии оценки и другие важные аспекты работы.
ОМК-Участие обсуждает результаты оценки на стратсессиях, и старается на разных этапах вовлекать конечных благополучателей, что позволяет более правильно интерпретировать результаты оценки. Кроме того, в ближайшее время фонд планирует поделиться результатами оценки, что позволит говорить о том, какие социальные эффекты могут носить городские фестивали.
