Искусственный интеллект и оценка

По мнению многих экспертов, 2023 год стал прорывным с точки зрения практического использования искусственного интеллекта (ИИ) самыми разными специалистами, включая высших руководителей крупнейших компаний. Не остались в стороне и специалисты по оценке проектов и программ. Как уже сегодня можно использовать ИИ в оценке? Вот что по этому поводу говорит сам искусственный интеллект (GigaChat). Картинку он же сделал по моей просьбе.

“Искусственный интеллект (ИИ) можно использовать для автоматизации процессов и повышения эффективности при проведении оценки социальных проектов и программ. Вот несколько способов:

• Автоматическая обработка данных: ИИ может обрабатывать большие объемы данных, собираемых в ходе реализации проекта, и анализировать их для получения инсайтов.
• Прогнозирование результатов: Используя алгоритмы машинного обучения, ИИ способен предсказывать возможные результаты проекта на основе исторических данных и текущих тенденций.
• Мониторинг и контроль: С помощью ИИ можно отслеживать выполнение задач и достижение целей проекта в реальном времени, что позволяет своевременно корректировать стратегию и бюджет.
• Интерактивная отчетность: Современные технологии ИИ позволяют создавать интерактивные отчеты, которые предоставляют информацию в удобном для восприятия формате, включая визуализацию данных и автоматическое генерирование рекомендаций.
• Персонализация: Использование ИИ позволяет адаптировать подход к оценке проекта в зависимости от индивидуальных особенностей и потребностей участников проекта.
• Диагностика проблем: Благодаря ИИ становится возможным обнаружить скрытые проблемы и слабые места в проекте, которые могут негативно сказаться на его успешности.
• Создание рекомендаций: На основе анализа данных ИИ может предложить рекомендации по улучшению текущих практик и стратегий в рамках проекта.
• Образование и обучение: Встроенные обучающие системы на базе ИИ могут помогать участникам проекта развивать новые навыки и компетенции, необходимые для достижения успеха.

Применение ИИ в оценке социальных проектов значительно повышает качество и скорость принятия решений, улучшает прогнозируемость результатов и способствует эффективному использованию ресурсов».

Пандемия и системные изменения в НКО

Вчерашнее заседание клуба PROОЦЕНКУ было посвящено системным изменениям и их оценке. Это заседание было проведено совместно с Центром развития филантропии (ЦРФ) Фонда Владимира Потанина, тема для обсуждения была выбрана в связи с недавним выходом в свет дайджеста ЦРФ «Системные изменения в благотворительных организациях».

По ходу обсуждения мы обратились к «пандемийному» опыту участников и предложили проанализировать изменения, которые произошли в их организациях в результате неожиданно возникшей экстремальной внешней ситуации. 

Вот лишь некоторые из проблем, с которыми столкнулись НКО в тот период: 

• У многих НКО возникли сложности в общении с благополучателями (детские дома, больницы, хосписы, помощь на дому и т.д.). 
• У многих НКО сократились объемы пожертвований в силу экономических сложностей, с которыми столкнулись жертвователи. 
• У подавляющего большинства НКО отсутствуют резервные фонды, которые можно использовать для осуществления необходимых выплат – зарплаты сотрудников, аренды помещений и т.д. 
• Практически все НКО получают финансирование на проектной основе. Выполнение многих проектов оказалось под угрозой в силу того, что нельзя было проводить мероприятия. При этом по некоторым мероприятиям уже была произведена предоплата, и средства вернуть было невозможно. Было непонятно, как отчитаться перед донорами . 
• Переход на удаленную работу оказался весьма непростым. Многие НКО к этому не были готовы технически. У многих сотрудников не было нормальных условий для удаленной работы из дома. 
• Интенсивность и объем работы на «удаленке» возросли настолько, что это в сочетании с общим стрессом от пандемии стало приводить к массовому выгоранию специалистов НКО.

По результатам обсуждения в малых группах стало понятно, что изменения в НКО не просто имели место, но и носили системный характер. Модель, предложенная Каниа и др., позволяет выделить в таких изменениях три уровня: 

1) Структурные изменения (относятся к политикам, практикам и потокам ресурсов). Они носят явный характер, их можно наблюдать.

2) Изменения в отношениях (связи, взаимоотношения, динамика власти). Что-то из этих изменений можно наблюдать, а что-то скрыто от внешнего наблюдателя.

3) Трансформационные изменения, характеризующиеся глубиной, существенностью и значимостью. Они относятся к ментальным моделям и происходят незаметно для внешнего наблюдателя, хотя, естественно, влияют на поведение людей.

Сравнение традиционного очного обучения с дистанционным

Традиционным очным обучением мы называем такой формат, когда ученики и преподаватель приходят в учебную аудиторию. В последние годы, особенно в связи с пандемией, все чаще стали говорить об "очном онлайновом обучении". Вот один из примеров ("Новая форма обучения - очное обучение в формате онлайн"). Подразумевается, что присутствие в едином виртуальном пространстве эквивалентно присутствию в аудитории. В английском языке для такой формы обучения придумали специальный термин: синхронное дистанционное обучение. Дело в том, что дистанционное обучение может проводиться синхронно или асинхронно. До пандемии наиболее используемым и изученным методом обучения было асинхронное (Asynchronous) дистанционное обучение, при котором участникам предлагались записанные видео для просмотра в любое время. Синхронное (Synchronous) дистанционное обучение обеспечивает участникам интерактивное общение с преподавателем и друг с другом в реальном времени. 

Естественно, возник вопрос о сравнении традиционного очного обучения (ТОО) с синхронным дистанционным обучением (СДО). В начале 20-х годов за рубежом был проведен ряд оценок и оценочных исследований по этому поводу. Вот некоторые выводы:

• Результативность СДО оказалась примерно такой же, как в ТОО.
• В тех случаях, когда при проведении СДО использовались возможности для ответов на вопросы учащихся, выдачи ведущим индивидуальной «обратной связи» и групповых обсуждений с участием ведущего, значимой разницы в освоении материала по сравнению с ТОО не было обнаружено. 
• Степень удовлетворенности учащихся при СДО и ТОО оказалась примерно одинаковой. 
• Преимущества СДО: использование инновационных технологий для представления нового и интересного контента; сокращение времени/стоимости поездок на учебу; гибкий график; дополнительный доступ к материалам для повторения; интервальность обучения (паузы), способствующая лучшему усвоению материала; возможность лучше подстраиваться под индивидуальные потребности учащегося  (что может быть невозможно в условиях ТОО).
• Недостатки СДО: ограничения в доступе к интернету у отдельных категорий участников; неумение некоторых учащихся пользоваться современными компьютерными технологиями на должном уровне; снижение концентрации внимания участников, когда занятия оказываются более продолжительными; уменьшение возможностей взаимодействия между участниками, когда продолжительность занятий невелика.