EAOKO

❗️Внимание! Группа ЕАОКО перезжает в мессенджер MAX. С 1 апреля все публикации будут выходить только в MAX. Ссылка на группу ЕАОКО MAX https://max.ru/join/HMN7X_g5ZHObz-U9DCY4HNURe01PNFJHWQvMD7eeMfY

Кроме того, из сказанного следует, что бессмысленно пытаться по отдельности оценивать когнитивные, эмоциональные и волевые компоненты деятельности. Для эффективного проявления инициативы необходим тонкий баланс когнитивных, эмоциональных и волевых процессов. Анализировать эти компоненты можно и по отдельности, но оценивать их по отдельности невозможно. Что касается инициативы, то сделанные нами наблюдения серьезно противоречат многим традиционным канонам психометрии. Мы утверждаем, что нельзя оценивать способности независимо от ценностей. Следовательно, необходим двухэтап-ный (не двухфакторный!) подход к оценке этих качеств. Мы должны сначала определить ценности индивида, а затем (и только затем) оценивать его способность проявлять широкий спектр когнитивных, эмоциональных и волевых навыков для достижения значимых целей.

Все это человек станет делать только в том случае, если цель, ради которой он проявляет инициативу, очень важна для него. Следовательно, главное значение здесь имеет цель 🎯. На практике оказывается, что значимая цель иногда состоит в овладении каким-то конкретным знанием, например, знанием о свойствах сплавов. А иногда она заключается в достижении какого-то высокозначимого для индивида типа поведения. Примерами последнего является изобретение лучших способов выполнения каких-либо дел и организация эффективной совместной работы. Из этого следует, что прежде, чем начинать оценивать способности человека, нужно сначала узнать его ценности или намерения, так как наиболее значимые способности проявляются только в связи со значимыми целями. Следовательно, не имеет никакого смысла пытаться оценивать способности вне их связи со значимыми целями.

Далее следует отметить: для того, чтобы проявленная инициатива привела к успеху, человек должен посвятить этому много времени и раздумий. Он должен не только совершить новые действия, но и проконтролировать результаты этих действий, а затем, сделав выводы, более тщательно изучить проблему, с которой он пытается справиться, и оценить эффективность примененной стратегии. Он должен просыпаться по ночам, пытаясь уловить смутно брезжущую на краю сознания мысль, и переместить ее в центр внимания, чтобы она стала полностью осознанной и пригодной для практического использования. Он должен предвидеть будущие препятствия и изобретать пути их обхода. Он должен заручиться поддержкой других людей. Он должен создать для решения этой проблемы свою собственную, уникальную систему специальных знаний – знаний, принципиально отличных от общих обиходных знаний, которые преподносит нам большинство традиционных образовательных программ.

Джон Равен. Природа компетентности. Познакомимся далее с позицией Дж. Равена, которая состоит в том, что «не имеет никакого смысла пытаться оценивать способности человека вне их связи со значимыми для него целями». 📖 Цитируется по «Компетентность в современном обществе. Выявление, развитие и реализация» (издательство «Когито-Центр», 2002), стр. 151-152 …Чтобы понять природу компетентности лучше всего, пожалуй, начать с примера. Рассмотрим такое качество, как «инициатива». Первая важная особенность этого качества, на которую следует обратить внимание, состоит в том, что оно имеет внутреннюю мотивацию. Любое действие, которое человек предпринимает по инструкции извне, не имеет смысла описывать как «инициативу». Следовательно, чтобы развить в человеке готовность и способность проявлять инициативу, нужно развивать в нем склонность проявлять ее по собственному желанию.

❗️Внимание! Группа ЕАОКО перезжает в мессенджер MAX. С 1 апреля все публикации будут выходить только в MAX. Ссылка на группу ЕАОКО MAX https://max.ru/join/HMN7X_g5ZHObz-U9DCY4HNURe01PNFJHWQvMD7eeMfY

Пример из Книги «Педагогическое тестирование». «Индивид, высоко ценящий успех в футболе, может проявлять в этой области большую инициативу, воспринимать обратную связь со стороны окружения, прибегать к помощи других для улучшения своих результатов, следить за своим стилем и последовательно улучшать его, искать новые технические приёмы, улавливать подсказки, позволяющие совершенствовать мастерство, замечать одобрение или неодобрение со стороны партнёров, проявлять волю и продолжать заниматься футболом, несмотря на трудности, желать и уметь убедить тех, от кого это зависит, предоставить команде поле для игры. Однако если способность этого же самого человека в осуществлении такой комплексной когнитивной, аффективной, волевой и социальной деятельности будет оцениваться в сфере математики – области, которую для примера будем считать незначимой для данного индивида, - оценивающий может ошибочно заключить, что этот человек неспособен (а не просто не имеет мотивацию) к тем аспектам деятельности, которые были названы выше (прим. – будут представлены в модели компетенции). Учителя и психологи слишком часто делают такие ошибочные выводы».

Основная идея Дж. Равена по оценке компетентности состоит в том, что оценивать любые характеристики человека (знания, умения, способности, личные качества) следует только в рамках актуальной (ценной) для оцениваемого человека деятельности. Иначе говоря, только в деятельности, которая для человека ценна и к реализации которой у него есть мотивация, человек может проявлять качества, подлежащие оценке. Не следует ожидать, что человек увлечённый цифровыми технологиями, сможет проявить свои качества во время занятия археологией или музыкой, если они не лежат в сфере его интересов и ценностей.

Джон Равен. Компетентности и их оценка. Познакомимся с идеями по оценке компетентностей Джон Равена, английского психолог XX века, имя которого связано с развитием психометрики и созданием одного из самых известных инструментов оценки интеллекта — «Прогрессивных матриц Равена». Кроме того, Равен был автором важных работ в области педагогического тестирования, в которых критиковал ограничения существующих измерительных подходов в образовании и психологии. Он предложил новые теоретические рамки для оценки компетентности, мотивации и поведения, стремясь к более глубокому пониманию человеческих способностей и их развития. На русском языке были изданы следующие книги: «Компетентность в современном обществе. Выявление, развитие и реализация» (издательство «Когито-Центр», 2002).  «Педагогическое тестирование: проблемы, заблуждения, перспективы» (издательство «Когито-Центр», 1999).

Анонс. ММСО 2026 Сессия 2 апреля 16.00-16.50 Онлайн Критериальное оценивание как инструмент управления качеством образования: взгляд управленца и педагога https://mmco-expo.ru/library/events/kriterialnoe-ocenivanie-kak-instrument-upravleniia-kacestvom-obrazovaniia-vzgliad-upravlenca-i-pedagoga-2286

📣 Обявление для участников группы ЕАОКО. Коллеги, группа будет переезжать в MAX, тк Телеграм уже практически не тянет. В MAX создана новая группа. Все последующие публикации в марте (21.03 и 28.03) будут выходить и здесь, и в MAX одновременно. А уже с апреля - только в MAX. Ссылка на группу ЕАОКО MAX https://max.ru/join/HMN7X_g5ZHObz-U9DCY4HNURe01PNFJHWQvMD7eeMfY

Психометрика: что это такое и зачем она нужна образованию Знакомимся с текстом, подкотовленным и опубликованным 18 июня 2022 года Skillbox Media на основе интервью с Алёной Куликовой, кандидатом наук об образовании, в прошлом академическим руководителем магистерской программы «Обучение и оценивание как наука» Института образования НИУ ВШЭ. Основные разделы интервью: • Как связаны психометрика и тесты • Как психометрика пришла в образование и зачем она здесь • Где работают психометрики и занимаются ли они заданиями для ЕГЭ

Психометрик разрабатывает, адаптирует и анализирует измерительные инструменты применительно к характеристикам личности, компетенциям и навыкам, образовательным достижениям индивидов, карьерному развитию и другим абстрактным атрибутам; оценивает логику, качество и надежность тестов, а также анализирует факторы, которые влияют на их результаты. Психометрики разрабатывают тесты и задания, оценивают их логику, результаты — и факторы, которые на них влияют. Ключевая задача для писхометрика — создать инструмент, соответствующий критериям надежности и валидности. Это означает, что результаты качественного теста должны быть воспроизводимыми и не зависеть от условий его проведения, а также быть обоснованным с точки зрения конкретного приложения. То есть, тест должен измерять именно тот конструкт, ради которого он был создан. Например, при анализе теста на оценку за прохождение онлайн-курса психометрику важно понимать, какой процент ответов обусловлен угадыванием, а какой — реальными знаниями слушателя. Подробнее

Психометрика и психометрики. В чём польза для образования? Познакомимся с несколькими интересными интервью от экспертов в области психометрики и её применением в сфере образования. Психометрика – научная дисциплина на стыке психологии, математики, статистики и педагогики. Она изучает теорию и методологию психологических измерений: разрабатывает способы количественно оценивать: знания и компетенции; когнитивные способности (интеллект, память, внимание); личностные черты и темперамент; мотивацию, ценности, установки; эмоциональные и поведенческие особенности.

Психометрика и психометрики. В чём польза для образования? Познакомимся с несколькими интересными интервью от экспертов в области психометрики и её применением в сфере образования. Психометрика – научная дисциплина на стыке психологии, математики, статистики и педагогики. Она изучает теорию и методологию психологических измерений: разрабатывает способы количественно оценивать: • знания и компетенции; • когнитивные способности (интеллект, память, внимание); • личностные черты и темперамент; • мотивацию, ценности, установки;эмоциональные и поведенческие особенности. Психометрик разрабатывает, адаптирует и анализирует измерительные инструменты применительно к характеристикам личности, компетенциям и навыкам, образовательным достижениям индивидов, карьерному развитию и другим абстрактным атрибутам; оценивает логику, качество и надежность тестов, а также анализирует факторы, которые влияют на их результаты.

Вопросы предоставления данных ИИ тесно связаны с моральными дилеммами, поскольку искажения в работе алгоритмов ИИ могут подрывать основные права человека. В частности, применение ИИ в оценивании в образовании подвергается критике за свою инвазивность, котрая заключается в том, что некоторые приложения требуют постоянного мониторинга и распознавания действий, жестов и эмоций учащихся, что может снижать и степень самостоятельности учащихся, и их удовлетворенность обучением, и чего они могут просто не хотеть. См. подробнее раздел 5. Этические вопросы использования ИИ в оценивании в публикации «Новые подходы к оцениванию: искусственный интеллект как драйвер изменений в образовании».

Конфиденциальность данных. Этические вопросы конфиденциальности при использовании ИИ в оценке в образовании очерчивают довольно широкий круг проблем. Как временный характер интересов и эмоций учеников, а также сложность процесса обучения влияют на интерпретацию данных и этические аспекты применения ИИ в образовательных контекстах? Какие критерии следует учитывать при определении и обновлении этических границ в сборе и использовании данных об учащихся? Как школы, ученики и учителя могут отказаться от участия или оспорить свое «присутствие» в больших наборах данных? Очевидно, что широкое внедрение технологий ИИ влечет за собой многочисленные риски и вызовы, связанные с правом собственности на данные (например, эксплуатация данных в коммерческих целях) или согласием на предоставление данных (например, способны ли учащиеся дать действительно осознанное согласие на участие в процедурах, напрямую или косвенно связанных с обучением или другим использованием их данных ИИ).

Академическая честность. Какие педагогические подходы в работе с ИИ являются этически оправданными? Как быть с плагиатом? Эти вопросы касаются использования ИИ как преподавателями, так и учащимися, и в оценке, и в общей практике. Проблема связана с тем, что учащиеся тоже могут обманывать с помощью ИИ, — как в ситуациях обычного внутриклассного оценивания, так и в оценивании с более высокими ставками. Например, учащиеся могут использовать генеративный ИИ, чтобы готовить эссе, рефераты, да и любые другие письменные или творческие задания и выдавать их за собственную работу. Это подрывает саму суть образования и может привести к девальвации дипломов. Отличить собственную работу учащегося от ответов, сгенерированных ИИ, может быть непросто.

Прозрачность алгоритмов — этическая проблема, тесно связанная с проблемой предвзятости. Важно обеспечить понимание принципов работы ИИ для участников процесса оценивания, а это, в свою очередь, будет способствовать и решению обозначенной проблемы предвзятости и ошибок в оценках. Неспособность человека понять, как именно большая языковая модель приходит к тому или иному выводу, отвечая на его вопрос, является сегодня характерной чертой взаимодействия людей и ИИ. Однако непрозрачность ИИ-алгоритмов обусловлена не только технической сложностью машинного обучения, но и распределенной моральной ответственностью между различными участниками процесса разработки ИИ. Такая распределенная ответственность затрудняет формулирование конкретных и адресных общественных ожиданий в отношении этических принципов, определяющих поведение ИИ.

При создании заданий для целей оценивания алгоритмическая предвзятость может проявляться сразу в нескольких аспектах. LLM может генерировать формулировки, содержащие незнакомые или неподходящие термины для определенных групп учащихся, что затрудняет интерпретацию заданий и снижает их валидность. Кроме того, в заданиях могут неявно воспроизводиться социальные предубеждения, связанные с полом, расой, возрастом, религией, национальностью и другими характеристиками, что ставит некоторых учащихся в неравные условия.