Об опыте разработки и внедрения аккредитационных педагогических измерительных материалов. Серия «Тестирование и нейросети». Николай Петрович Морозов
енции специалистов в сфере информационно-библиотечных технологий сегодня актуальной является разработка и внедрение аккредитационных педагогических измерительных материалов для оценки знаний и навыков студентов соответствующих колледжей и техникума. Одним из ключевых направлений в этой области является дисциплина «Операционные системы и среды». Эту дисциплину я в течение 4х лет преподавал в Санкт – Петербургском техникуме библиотечных и информационных технологий. В 2020 году я участвовал в процессе разработки и использования аккредитационных измерительных материалов для проверки студентов этого техникума. В данной книге я хочу поделиться своими учебными материалами, выводами и рекомендациями по поводу решения этой задачи.
Прежде всего, необходимо отметить, что разработка аккредитационных педагогических измерительных материалов для оценки знаний и навыков студентов Санкт – Петербургского техникума библиотечных и информационных технологий в 2020 году включала в себя несколько этапов:
1. Определение целей и задач измерения: определение того, что именно требуется измерить в рамках аккредитационной проверки, какие образовательные достижения и навыки должны быть оценены.
При разработке измерительных материалов важно учесть критерии и стандарты, установленные образовательными регуляторами, а также требованиями к профессиональной подготовке специалистов в области информационных технологий.
1. Первым шагом в разработке аккредитационных педагогических измерительных материалов был анализ программы обучения по дисциплине «Операционные системы и среды». Это позволило определить основные темы, которые должны быть охвачены тестированием, и учесть актуальные требования и стандарты в области операционных систем.
2. Составление списка компетенций:
На основе программы обучения (смотрите в Приложении Рабочую программу учебной дисциплины ОП.07 «Операционные системы и среды» по специальности – 09.02.05 Прикладная информатика квалификация – техник-программист) был составлен список ключевых компетенций, которые студенты должны усвоить. Этот список помог определить основные темы для создания измерительных материалов и оценки уровня знаний студентов.
3. Разработка заданий:
Следующим шагом была разработка разнообразных заданий, позволяющих проверить уровень знаний студентов по каждой из тем дисциплины «Операционные системы и среды».
Задания были структурированы в соответствии с ранее определенными компетенциями.
На основе определенных целей и критериев аккредитации разрабатывались тестовые задания, которые могли включать в себя как теоретические вопросы, так и задания на практическое применение знаний об операционных системах и средах.
4. Тестирование и утверждение материалов:
Полученные измерительные материалы были проведены через тестирование и предварительную проверку. Это позволило выявить возможные ошибки и внести необходимые корректировки, чтобы материалы соответствовали целям и задачам проверки.
Проверка на качество и достоверность: проведение экспертной оценки и пилотного тестирования для проверки качества тестовых материалов и их способности достоверно измерять образовательные результаты.
В рамках разработки аккредитационных педагогических измерительных материалов по данной дисциплине
были разработаны Тестовые задания по профессии (230701) Прикладная информатика по отраслям для дисциплины «Операционные системы и среды» (смотрите в Приложении Тестовые задания…).Эти задания состоят из 2х частей: блока А и блока Б.
Блок А включает в себя 50 заданий (с единственным верным ответом из 4х предлагаемых).
Блок Б включает в себя 30 заданий (с правильными ответами от одного до 6ти).
Установление стандартов процедуры проведения тестирования, выравнивание уровня сложности различных заданий и установление критериев оценки было проведено в соответствии с требованиями поверяющей техникум комиссии. В заключительной книги в Рекомендациях это отражено.
5. После разработки измерительных материалов проводилось пилотное тестирование, которое позволило оценить их эффективность и соответствие поставленным целям. Процесс пилотного тестирования может также включать обратную связь со студентами для улучшения измерительных материалов. В нашем случае для этого просто не было времени.
Тем не менее, используя ранее разработанные учебные и методические материалы (смотрите в Приложении Календарно – тематический план по программе «ОП 07. Операционные системы и среды» по специальности 09.02.05 «Прикладная информатика (по отраслям)» и Методические рекомендации к практическим занятиям для преподавателя по дисциплине «Операционные системы и среды») мне удалось провести со студентами два занятия по подготовке их к тестированию.
6. После завершения разработки и улучшений измерительные материалы были внедрены в систему аккредитации, с последующим постоянным мониторингом и оценкой их эффективности в процессе оценки