рас : M - kgau.ru · 2014. 10. 1. · 9 Ответственность 11 Приложение...

Министерство сельского хозяйства Российской федерации

Департамент научно-технологической политики и образования

Федеральное государственное бюджетное образовательное

учреждение высшего профессионального образования

«Красноярский государственный аграрный университет»

Методическая инструкция

7.3.1-2.0 Проектирование и разработка

КрасГАУ-СМК-МИ-7.0

О разработке АПИМ, организации и проведении

аттестационного бланкового тестирования

Принято:

на заседании Научно-методического

совета Федерального государственного

бюджетного образовательного учреждения

высшего профессионального образования

«Красноярский государственный

аграрный университет»

Протокол № 4 от 19 декабря 2012 г.

Утверждаю:

Проректор по учебно-аккредитационной и

лицензионной работе

__________________Е.И. Сорокатая

«_____» ______________2013 г.

Методическая инструкция

СИСТЕМА МЕНЕДЖМЕНТА КАЧЕСТВА

О разработке АПИМ, организации и проведении аттестационного бланкового тестирования.

КрасГАУ-СМК-МИ-7.3-2.0-2013

Версия 2.0

Дата введения: _______________

Красноярск, 2013

Должность Фамилия/ Подпись Дата

Разработал Доцент кафедры РГиБСХЖ

Старший методист ОЛОКО

Ерѐмина И.Ю.

Зинченко И.В.

Проверил Начальник ОЛОКО Новикова В.Б.

Согласовал Проректор по УАЛР Сорокатая Е.И. Дата и время распечатки: 01.10.2014, 2:30

КЭ №_______ УЭ № _______ ИЭ № _______ Стр 1 из 30

КрасГАУ




МИ О разработке АПИМ, организации и проведении аттеста-

ционного бланкового тестирования.

КрасГАУ-СМК-МИ-7.3.1-2.0

Дата и время распечатки: 01.10.2014, 2:30 Стр 2 из 30

КрасГАУ

Предисловие

1 РАССМОТРЕННО на заседании Научно-методического совета КрасГАУ Протокол №4

от 19 декабря 2012 г.

2 ПРИНЯТА на заседании Научно-методического совета КрасГАУ Протокол №4 от 19

декабря 2012 г.

3 ВВЕДЕНА ВТОРИЧНО С ИЗМЕНЕНИЯМИ.








КрасГАУ

Содержание

1 Область применения 4

2 Нормативные ссылки 4

3 Используемые сокращения 4

4 Общие положения 5

4.1 Требования к комплекту АПИМ 5

4.2. Формы тестовых заданий 6

4.3 Спецификация 6

4.4 Кодификатор 6

5 Банк тестовых заданий 7

6 Экспертиза 9

7 Требования к проведению аттестационного бланкового тестирования 9

8 Порядок разработки, оформления, утверждения, введения в действие, актуа-

лизации и хранения АПИМ и изменений к нему 9

9 Ответственность 11

Приложение А. Взаимодействие различных структур и организаций в процессе

экспертизы АПИМ и БТЗ 12

Приложение Б. Форма титульного листа АПИМ 13

Приложение В. Спецификация теста 14

Приложение Г. Кодификатор 15

Приложение Д. Банк тестовых заданий 16

Приложение Е. Отчет о результатах экспертизы тестовых заданий 17

Приложение Ж. Модель АПИМ 18

Приложение З. Требования к тестовым заданиям 19

Приложение И. Инструкция по проведению тестирования 21

Приложение К. Тест-билет 22

Приложение Л. Лист ответа 24

Приложение М. Методика оценивания уровня подготовки специалистов на со-

ответствие требованиям ФГОС ВПО, ФГОС СПО 27

Приложение Н. Протокол проверки знаний студентов в ходе самообследования 28

Приложение О. Диаграмма хода действий процесса разработки АПИМ 29








КрасГАУ

1 Область применения

1.1 Настоящая методическая инструкция является документом системы менеджмента ка-

чества ФГБОУ ВПО КрасГАУ (далее КрасГАУ), определяющим требования к разра-

ботке АПИМ, организации и проведении аттестационного бланкового тестирования.

1.2 Методическая инструкция регламентирует процессы разработки АПИМ и проведения

тестирования, взаимодействие структурных подразделений КрасГАУ и определяет

их задачи, функции, взаимоотношения и связи (Приложение А).

1.3 Оформление и построение методической инструкции соответствует требованиям

СМК-ДП-4.2.3. Порядок управления документацией.

1.4 Настоящая методическая инструкция обязательна к применению всеми структурными

подразделениями КрасГАУ в части их участия в указанных процессах.

2 Нормативные ссылки

Настоящая методическая инструкция разработана с учетом требований следующих

правовых и нормативных документов:

Федеральные государственные образовательные стандарты высшего профессио-

нального образования (ФГОС ВПО), Федеральные государственные образова-

тельные стандарты среднего профессионального образования (ФГОС СПО)

ГОСТ Р ИСО 9000-2008 Системы менеджмента качества. Основные положения и

словарь;

ГОСТ Р ИСО 9001-2008 Системы менеджмента качества. Требования;

СМК-ДП-4.2.3. Порядок управления документацией.

3 Используемые сокращения

В настоящей МИ СМК используются следующие сокращения:

АПИМ – аттестационные педагогические измерительные материалы;

ДЕ – дидактические единицы;

ЗЕ - зачетная единица (крéдит);

БТЗ – банк тестовых заданий;

ТЗ– тестовое задание;

ФГОС ВПО – федеральный государственный образовательный стандарт высшего профес-

сионального образования;

ФГОС СПО – федеральный государственный образовательный стандарт среднего профес-

сионального образования;

ООП – основная образовательная программа;

СМК – система менеджмента качества;

АСТ – адаптивная среда тестирования.








КрасГАУ

4 Общие положения

4.1. Требования к комплекту АПИМ

Преподавателям, разрабатывающим собственные тесты, необходимо ознакомиться со

следующими документами, определяющими эту процедуру и руководствоваться ими:

Модель АПИМ (Приложение Ж);

Требования к тестовым заданиям (Приложение З).

4.2 Формы тестовых заданий

По принятой в отечественной и зарубежной научной литературе классификации

тестовых заданий выделяют по форме ответов: задания закрытого типа (альтернативных

ответов, множественного выбора, на восстановление соответствия, на установление после-

довательности); задания открытого типа; задания комбинированного типа, в которых уча-

щиеся выбирают правильный ответ из данного набора ответов; в ТЗ этой формы рекомен-

дуется 3-6 вариантов ответов. Множественный выбор предусматривает выявление класси-

фикационных знаний (на одно правило, закон).

4.2.1 Задания открытой формы отличаются тем, что вариант ответа не предъявляется

испытуемому, и он должен самостоятельно его сформулировать. Формулировка ТЗ должна

быть простой, краткой.

4.2.2 Задания на установление соответствия, выполнение которых связано с выявле-

нием соответствия между элементами двух множеств. Общее количество элементов в каж-

дом столбце: 3-6. Начинается ТЗ со слова «Соответствие …».

4.2.3 Задания на установление правильной последовательности, в которых от сту-

дента требуется указать порядок действий или процессов. Общее количество элементов в

ТЗ должно быть 4-6. Начинается тестовое задание со слова «Последовательность …».

Комплект АПИМ состоит из:

титульного листа (Приложение Б);

спецификации теста (Приложение В);

кодификатора (Приложение Г);

банка тестовых заданий (Приложение Д);

отчета о результатах экспертизы тестовых материалов (Приложение Е).

Преподавателям-разработчикам АПИМ необходимо руководствоваться следующими

документами:

1. Модель АПИМ (Приложение Ж);

2. Требования к содержанию и оформлению тестовых заданий (Приложение З);

3. Тест-билет (Приложение К).

Организаторам тестирования и преподавателям, анализирующим результаты тести-

рования, необходимо ознакомиться с документами, регламентирующими процедуру тести-

рования:

1. Инструкция по проведению тестирования (Приложение И);

2. Бланк ответов и правила его оформления (Приложение Л);








КрасГАУ

3. Правила заполнения и проверки бланка ответов (Приложение Л);

4. Протокол проверки знаний (Приложение Н).

4.3 Спецификация

В спецификации отражены основные характеристики теста, особенности проведения

тестирования. Рекомендации к заполнению:

ПОЗИЦИЯ ВАРИАНТЫ

Цель тестирования Коррекция учебных процедур

Оценка учебных достижений

Самопроверка

Самоподготовка

Проверка степени подготовленности

Определение соответствия уровня подготовки

специалистов ФГОС

Функция тестирования Диагностика

Контроль

Обучение

Прогноз

Применение Определение уровня подготовки специалистов в

рамках внутреннего аудита

Подготовка к комплексной проверке

Экзамен, зачет

Обучение, самоконтроль

Вид контроля Входной

Формирующий (текущий, тематический, рубеж-

ный)

Итоговый

Проверка остаточных знаний

Стратегия расположения

заданий в тесте

По возрастающей трудности в рамках темы

По возрастающей трудности в рамках теста

В случайном порядке в рамках темы

В случайном порядке в рамках теста

Перечень приложений к

спецификации кодификатор

4.4 Кодификатор

Кодификатор – содержательная структура АПИМ. Он составляется для того, чтобы

указать разделы, по которым происходит тестирование и контроль знаний.

Структура теста должна охватить весь материал, изложенный в Федеральном госу-

дарственном образовательном стандарте высшего (среднего) профессионального образова-








КрасГАУ

ния (ФГОС ВПО (СПО)), по учебной рабочей программе соответствующей учебной дисци-

плине. Должны быть выделены модульные единицы учебного материала, подлежащие кон-

тролю.

По утвержденным нормативам КрасГАУ: на одну зачетную единицу (кредит) прихо-

дится не менее 50 тестовых заданий. Зачетной единицей (ЗЕ), крéдитом, называется мера

трудоемкости образовательной программы. Зачетная единица, крéдит, согласно Инструк-

тивному письму № 14-52-988/3 от 28.11.2002 г. Министерства образования Российской Фе-

дерации, соответствует 36 академическим часам общей трудоѐмкости продолжительностью

по 45 минут (или 27 астрономическим часам).

Содержание кодификатора должно соответствовать структуре дисциплины, а уровень

трудности заданий - требованиям к уровню подготовки в соответствии со стандартом.

Кодификатор позволяет установить соответствует ли АПИМ требованиям ФГОС

ВПО (СПО) по уровню подготовки, охватывает ли тест выборку конкретных знаний, уме-

ний и навыков.

Тестовые задания (ТЗ) могут располагаться в любой точке (узле) иерархического де-

рева.

Для каждого ТЗ обязательно указывается его принадлежность определенному узлу

(код тестового задания).

Рекомендуемая глубина ветвления 3-4: модуль/тема/понятие, мо-

дуль/тема/подтема/понятие (рис. 1).

5 Банк тестовых заданий

Банк тестовых заданий отражает непосредственно сам тест. Каждое тестовое задание

должно быть представлено кодом в соответствии с кодификатором, типом, формулировкой,

вариантами ответа, ключом верного ответа. Варианты ответов должны быть пронумерова-

ны. Нумерация ответов не должна являться подсказкой или правильным вариантом. Когда

ответы к закрытым заданиям указывают на устойчивое нарастание или снижение какого-

либо качества или свойства, то их лучше упорядочить. В тестовом задании открытой фор-

мы место пропущенного слова, являющегося ответом, должно быть обозначено. Для одно-

значности понимания подобные задания могут сопровождаться пояснением, оформленным

курсивом и в скобках. Ключ верного ответа указывает на правильный вариант ответа.








КрасГАУ

Пример кодификатора:

Код

тестового задания


Объем

содержа-

ния мо-

дуля, ча-

сов Мо

дул

ь

Тема Под-

тема

1 Линейная алгебра 150

1.1. Системы линейных уравнений 60

1.1.1. Понятие системы линейных уравнений и ее решения

1.1.2. Совместимые и несовместимые системы

1.1.3. Определенные и неопределенные системы

1.2. Определители 30

1.2.1. Свойства определителей

...

Дисциплина

Модуль 1 Модуль N Модуль 2

Тема 1 Тема 2 ... ... Тема N

Подтема

1

Подтема

2

Понятие

N

Понятие

1

Понятие

2

Подтема

N

...

...

...

...

Рисунок 1.Иерархическое дерево теста








КрасГАУ

6 Экспертиза

Эксперт должен быть знаком с технологией разработки АПИМ. Отчет эксперта предна-

значен для представления заключительного анализа качества АПИМ. Оценка качества

содержания теста обычно проводится независимыми экспертами, не участвовавшими в

разработке теста. Как правило, число экспертов составляет не менее трех человек по ка-

ждому тесту. К экспертизе привлекаются наиболее опытные преподаватели, имеющие

большой опыт работы с теми учащимися, для которых предназначен тест. Отчет экспер-

та должен дать ответ на вопрос: «Адекватен ли тест целям тестирования?». Состав экс-

пертной комиссии формируется дирекциями институтов и утверждается ректором.

6.1. Основные критерии экспертизы

Соответствие требованиям ФГОС ВПО (СПО) направлению подготовки (специаль-

ности), рабочей программы и структуры АПИМ;

Объемность охвата зачетными единицами модулей дисциплины;

Достаточность ТЗ на каждый уровень БТЗ;

Требования к ТЗ (Приложение З);

Стилистика, отсутствие ошибок в правильном варианте ответов, форме ТЗ.

Соответствие требованиям ФГОС ВПО (СПО) к содержанию определяется по кодифи-

катору и ФГОС ВПО (СПО), соответствие требованиям ФГОС ВПО (СПО) по уровню под-

готовки определяются по базе тестовых заданий и кодификатору, обобщающие выводы о

качестве тестовых материалов делаются на основании спецификации (цель, применение,

вид и функции контроля).

7 Требования к проведению аттестационного бланкового тестирования

Преподавателям, организующим тестирование, необходимо ознакомиться со сле-

дующими документами, регламентирующими процедуру тестирования:

1. Инструкция по проведению тестирования (Приложение И);

2. Тест-билет (Приложение К);

3. Правила оформления Тест-билета (Приложение К);

4. Листы ответа (Приложение Л);

5. Правила заполнения и проверки Лист-ответа (Приложение Л).

Преподавателям, анализирующим результаты тестирования, необходимо ознако-

миться со следующими документами, определяющими эту процедуру:

1. Методика оценивания уровня подготовки специалистов на соответствие требовани-

ям ФГОС ВПО (СПО) при проведении бланкового тестирования (Приложение М);

2. Протокол проверки знаний (Приложение Н).

8 Порядок разработки, оформления, утверждения, введения в действие, актуали-

зации и хранения АПИМ и изменений к нему (Приложение О)

8.1. Председатели методических комиссий институтов формируют и предоставляют в

ОЛОКО сведения о составе экспертной комиссии по проверке БТЗ для составления приказа

«О составе комиссий для проверки банка тестовых заданий».








КрасГАУ

8.2 .Кафедра анализирует ФГОС ВПО (СПО), учебные планы и рабочие программы

и по каждой дисциплине формирует АПИМ.

8.3. Кафедра создает авторский коллектив из числа своих сотрудников и специали-

стов соответствующей предметной области.

8.4. Авторский коллектив на основании модели АПИМ и требованиям к ТЗ разраба-

тывает его структуру и содержание. (Модуль, блок, тема; Раздел, подраздел, тема).

8.5. Авторский коллектив разрабатывает тестовые задания (с использованием 4-х

форм тестовых заданий: открытые, закрытые, на упорядочение, на соответствие).

8.6. Кафедрой проводится пробное тестирование.

8.7. На основании протокола экспертизы и пробного тестирования проводится пред-

варительная коррекция .

8.8.Банк тестовых заданий на бумажном носителе направляется на внешнюю экспер-

тизу.

8.9. Предоставление в экспертную комиссию института комплекта АПИМ и внеш-

ние рецензии.

8.10. Эксперты осуществляют проверку и коррекцию, выдают рекомендации по уст-

ранению неточностей и недостатков каждого неверно сформулированного тестового зада-

ния и заполняют отчет о результатах экспертизы.

8.11 Процедура экспертизы АПИМ включает в себя: 1) анализ на соответствие

ФГОС ВПО (СПО) по направлению подготовки (специальности), рабочей программы и

структуры АПИМ; 2) замечания и предложения по структуре АПИМ; 3) полноту охвата

всех модулей; 4) методическое обеспечение АПИМ; 5) достаточность ТЗ на каждый уро-

вень АПИМ; 6) прохождение экспертом пробного тестирования; 7) замечания по стилисти-

ке, ошибкам в правильном варианте ответов, форме ТЗ; 8) Заполнение экспертного заклю-

чения; 9) получение внешней рецензии; 10) утверждение АПИМ осуществляется на Науч-

но-методическом совете КрасГАУ, регистрация производится в ОЛОКО.

8.12 Утвержденные АПИМ хранятся на кафедре, копии направляются в дирекцию

института для пополнения УМКД и соответствующей ООП, электронная версия предос-

тавляется в отдел лицензирования и обеспечения качества образования.

8.13 Оформление АПИМ должно соответствовать требованиям СМК-ДП-4.2.3. По-

рядок управления документацией и настоящей МИ.

8.14 Необходимые изменения в АПИМ своевременно вносятся на основе предложе-

ний по улучшению деятельности.

Внесение изменений в АПИМ оформляется решением кафедры при необходимости

перераспределения, изъятия или добавления заданий АПИМ. В этом случае автор АПИМ

на титульном листе пишет “С изменением на... листах”, номер и дату протокола и подшива-

ет изменения к документу.

8.15 АПИМ должен быть заменен и заново утвержден в следующих случаях:

при изменении названия вуза или структурного подразделения;

при смене образовательных стандартов ВПО (СПО), учебного плана;

в результате внесения более 30% изменений тестовых заданий.

Актуализацию осуществляет автор (авторский коллектив).








КрасГАУ

9 Ответственность

Ответственность за планирование разработки, издание, введение в действие и актуали-

зацию настоящей методической инструкции несет начальник отдела лицензирования и

обеспечения качества образования.

Контроль выполнения требований настоящей методической инструкции осуществляет

проректор по учебно-аккредитационной и лицензионной работе.

Контроль за разработкой и состоянием АПИМ возлагается на заведующих кафедрами и

председателей методических комиссий институтов.








КрасГАУ

Приложение А

Взаимодействие различных структур и организаций

в процессе экспертизы АПИМ и БТЗ

Другие ВУЗы, НИИ и организа-

ции

Экспертная комиссия

КрасГАУ

ППС ка-

федры Автор

Студенты

Экспертная комиссия

института

Проректор УАЛР Научно-методический

совет КрасГАУ








КрасГАУ

Приложение Б

Форма титульного листа АПИМ

Министерство сельского хозяйства Российской Федерации


Федеральное бюджетное государственное образовательное учреждение



УТВЕРЖДАЮ:

Проректор по учебно-аккредитационной

и лицензионной работе

_____________Е.И. Сорокатая

«______»______________ 20__ г.

КОМПЛЕКТ

АТТЕСТАЦИОННОГО ПЕДАГОГИЧЕСКОГО

ИЗМЕРИТЕЛЬНОГО МАТЕРИАЛА

(АПИМ)

Институт ____________________________________________________________

Кафедра ____________________________________________________________

Наименование и шифр ООП

____________________________________________________________

Дисциплина ____________________________________________________________

Комплект АПИМ принят

на заседании Научно-методического совета университета

от «_______» _____________________ 20____ г.

Протокол № _________








КрасГАУ

Приложение В

Спецификация теста






СПЕЦИФИКАЦИЯ ТЕСТА

Институт __________________________________________________________________

Кафедра ___________________________________________________________________

Наименование и шифр ООП __________________________________________________

Дисциплина ________________________________________________________________

Цель тестирования___________________________________________________________

Функция контроля____________________________________________________________

Время тестирования (мин)_____________________________________________________

Количество тестовых заданий в БТЗ_____________________________________________

Количество тестовых заданий в одном варианте___________________________________

Стратегия расположения заданий в тесте_________________________________________

Курс__________, семестр обучения______________________________________________

Перечень приложений_________________________________________________________

Автор, авторский коллектив

____________________________________________________________________________

Эксперты ___________________________________________________________________

_________________________________________________________________________

____________________________________________________________________________

Директор института_______________________ / ________________ /

Зав кафедрой________________________ / _________________/








КрасГАУ

Приложение Г

Кодификатор






КОДИФИКАТОР

Институт _______________________________________________________________

Кафедра ________________________________________________________________

Наименование и шифр ООП __________________________________________________

Дисциплина _____________________________________________________________

Код

тестового

задания


Объем со-

держания

раздела,

часов

Мо-

дуль Тема

Под-

тема

Автор, авторский коллектив ___________________________________________________

Дата разработки______________________________________________________________

Зав. кафедрой ____________________________ / ________________ /

Директор института _______________________ / _________________/








КрасГАУ

Приложение Д

Банк тестовых знаний






БАНК ТЕСТОВЫХ ЗАДАНИЙ

Институт __________________________________________________________________________________

Кафедра __________________________________________________________________________________

Наименованиеи шифр ООП ________________________________________________________

Дисциплина _______________________________________________________________________

КОД (в соот-ветствии с коди-фикато-

ром)

ТИП ТЕСТОВО-ГО ЗАДАНИЯ

(1- закрытое 2- открытое 3 -последователь-ность 4 –соответствие)

ТЕСТОВОЕ ЗАДАНИЕ

КЛЮЧ ВЕРНОГО ОТВЕТА

(ЭТА-ЛОН)

Автор, авторский коллектив ____________________________________________

Дата разработки_______________________________________________________

Зав. кафедрой_______________________________________________ / ________________/

Директор института_________________________________________ / _________________/








КрасГАУ

Приложение Е

Отчет о результатах экспертизы тестовых материалов



Федеральное государственное бюджетное образовательное учреждение



ОТЧЕТ

О РЕЗУЛЬТАТАХ ЭКСПЕРТИЗЫ

ТЕСТОВЫХ МАТЕРИАЛОВ

Институт ___________________________________________________________

Кафедра ____________________________________________________________

Наименование и шифр ООП ____________________________________________________________

Дисциплина ____________________________________________________________

Соответствие теста поставленным целям:

Соответствие требованиям ФГОС ВПО (СПО) к содержанию ____________________________________________________________

Соответствие требованиям ФГОС ВПО (СПО) по уровню подготовки ____________________________________________________________

Обобщающие выводы о качестве тестовых материалов ____________________________________________________________

Эксперт (экспертная комиссия) __________________________/________________/

Дата проведения экспертизы ____________________________________________

Председатель экспертной комиссии __________ / _____________ /

Пример:

Соответствие теста поставленным целям:

Соответствие требованиям ФГОС ВПО (СПО) к содержанию охвачены все зачетные едини-

цы ФГОС ВПО (СПО)

Соответствие требованиям ФГОС ВПО (СПО) по уровню подготовки соответствует, тест

оценивает уровень подготовки студентов в рамках учебной программы. Тест охватывает

знания, умения, навыки.(Нужное подчеркнуть)

Обобщающие выводы о качестве тестовых материалов Тест пригоден для_____________








КрасГАУ

Приложение Ж

Модель аттестационного педагогического

измерительного материала (АПИМ)

Структура теста должна охватить весь материал, изложенный в ФГОС ВПО (СПО) по

соответствующей учебной дисциплине или в рабочей программе. Должны быть выделены

дидактические единицы (ДЕ) учебного материала, подлежащие контролю. Дидактическими

единицами являются законы и закономерности, характерные для конкретной дисциплины. В

качестве дидактических единиц могут быть приняты разделы дисциплин, содержание кото-

рых приведено в федеральном государственном образовательном стандарте высшего (сред-

него) профессионального образования (ФГОС ВПО (СПО)). Содержание кодификатора

должно соответствовать структуре дисциплины по ФГОС ВПО (СПО), а уровень трудности

заданий - требованиям к уровню подготовки по ФГОС ВПО (СПО).

Опыт показал, что оптимальное число контролируемых дидактических единиц (раз-

делов) в одном контрольном материале - от 2 до 12.

Для контроля освоения каждой дидактической единицы используется набор заданий

(3-7) по уровню трудности, который установлен ФГОС ВПО (СПО).

Общее число заданий в АПИМ находится в пределах от 100 до 300 и зависит от коли-

чества часов, отводимых на изучение дисциплины (например, на одну 72-часовую дисцип-

лину приходится минимум 100 тестовых заданий).

Модель аттестационного педагогического измерителя должна отвечать следующим

требованиям:

1. АПИМ должен содержать от 2 до 12 (рекомендуется) контролируемых дидактических

единиц (2-8 модулей).

2. Для повышения надежности оценки освоения каждого модуля дисциплины (дидакти-

ческой единицы), аттестационный педагогический измеритель должен содержать не-

сколько заданий для контроля каждого модуля (3-7). Если, например, критерий освое-

ния модуля 50%, то количество тестовых заданий рекомендуется от четырех.

3. При разработке критериально - ориентированных тестов (аттестация, зачет) основное

количество тестовых заданий (80%) должно по уровню трудности соответствовать

критерию оценки. Так, если критерий оценки (аттестации) модуля (теста) 50%, то ос-

новная масса тестовых заданий должна иметь коэффициент трудности 0,5.

4. При разработке нормативно–ориентированных тестов (классификация, оценка) рас-

пределение тестовых заданий по уровню трудности должно быть равномерно (по 25%

на каждый тип задания).

5. Общее число тестовых заданий в АПИМ должно находится в пределах от 100 до 300.

Это количество определяется количеством часов, отведенных на изучение дисципли-

ны.








КрасГАУ

Приложение З

Требования к тестовым заданиям

1. Тестовое задание (ТЗ) должно быть представлено в форме краткого суждения,

сформулированного четким языком и исключающего неоднозначность заключения тести-

руемого на требования тестового задания. В тексте задания должна быть устранена всякая

двусмысленность, неопределенность или неясность формулировок. ТЗ должно быть кор-

ректно.

2. ТЗ должно быть однозначным и самообъясняющим.

3. Ни в формулировке ТЗ, ни в ответах не должно быть подсказок.

4. Содержание тестового задания не должно содержать повторов, двойных отрицаний

и слэнга. Тестовое задание не допускает формы альтернативного высказывания.

5. Формулировка тестового задания должна быть выражена в повествовательной фор-

ме (вопросы исключены). В ТЗ следует старательно избегать применения слов - вопросов

(«как», «почему», «какой» и т.д.).

6. По возможности, текст ТЗ не должен содержать сложноподчиненные конструкции,

по конструкции он должен быть простым.

7. В формулировке ТЗ не должно быть повелительного наклонения («выберите», «вы-

числите», «укажите» и т.д.)

8. ТЗ должны иметь различную меру трудности (на разный уровень мышления).

9. Формулировка ТЗ должна быть минимальна (рекомендуется - до 15 слов).

10. По возможности специфический признак, ключевое слово выносится в начало ТЗ.

Нельзя начинать ТЗ с предлога, союза, частицы.

11. ТЗ не должно быть сложным. Среднее время решения ТЗ - не более 2-3 минут.

12. Желательно использование рисунков, формул и других поясняющих объектов.

13. Все варианты ответов должны быть сопоставимы по длине, и не превышать одной

строки, правильный ответ может быть короче других, но не во всех заданиях теста.

14. Запрещается наличие повторяющихся фраз в дистракторах.

15. Ответ на ТЗ должен быть однозначным. Недопустимы ответы типа: «все выше пе-

речисленное верно», «все указанные ответы - неверны» и т.п.

16. Количество дистракторов в ТЗ должно быть больше 3-х, но меньше 7.

17. В заданиях закрытого типа не должно быть заведомо ложных ответов, ответов, со-

держащих подсказку, а также явно выделяющихся, обособленных ответов. Дистракторы

должны быть близки по смыслу и равновероятны, привлекательны, исключающими угады-

вание.

18. Каждое ТЗ должно иметь хотя бы один ответ, помеченный как правильный.

19. Запрещено применение всех правильных ответов или всех неправильных (дист-

ракторов).

20. ТЗ должно быть валидно, значимо для данной проблемы материала.








КрасГАУ

Продолжение приложения З

21. Из числа тестовых исключаются задания, содержащие оценочные суждения и

мнения ученика по какому-либо вопросу.

22. Ни один из дистракторов не должен являться частично правильным ответом, пре-

вращающемся при определенных дополнительных условиях в правильный ответ.

23. ТЗ должно быть ориентировано на требуемый уровень подготовки студента.

24. ТЗ открытой формы конструируется таким образом, чтобы пропущенное слово

было в конце.

25. Когда ответы к закрытым заданиям указывают на устойчивое нарастание или сни-

жение какого-либо качества или свойства, то их лучше упорядочить.

26. Все ответы должны быть параллельными по конструкции и грамматически согла-

сованными с основной частью задания теста.

27. Тестовое задание должно быть технологично построено, быстро и легко пони-

маться.








КрасГАУ

Приложение И

Инструкция по проведению тестирования

1. Перед началом тестирования студенты должны быть ознакомлены с целью, особенно-

стями (количество заданий, время выполнения, типы вопросов и правила ответов и

т.д.) и правилами его проведения.

2. Вход в компьютерный класс осуществляется за 10-15 минут до начала тестирования.

За это время студент должен сдать вещи (п.4,5), занять рабочее место, получить инст-

рукции и необходимый материал для тестирования (в случае бланкового тестирования

– это тест-билеты и лист-ответы; они должны быть без полиграфического брака).

3. Во время тестирования студенты должны находиться в одинаковых условиях; условия

должны быть комфортные, в классе должна быть тишина.

4. Студентам не разрешается пользоваться телефонами, плеерами, литературой, кон-

спектами и другими средствами, способствующими подсказке.

5. Сумки, пакеты должны быть отложены, телефоны отключены.

6. Студентам не разрешается перемещаться по классу, разговаривать; если у студента

возник вопрос, ему необходимо поднять руку и дождаться, когда подойдет преподава-

тель.

7. Студенту разрешается пользоваться листами для черновиков, справочными материа-

лами, калькулятором, если они необходимы по условиям тестирования.

8. Во время тестирования в компьютерном классе должны находиться ответственные

лица: представитель кафедры, института (преподаватель, не следует привлекать сту-

дентов) и лицо, способное оказать техническую помощь (лаборант, администратор).

9. Ответственное лицо (преподаватель) должно следить за соблюдением правил тести-

рования, оказывать студентам консультативную помощь, решать спорные вопросы,

способствовать комфортному эмоционально-психологическому климату.

В случае бланкового тестирования:

любые исправления в лист-ответах должны быть заверены подписью ответст-

венного лица (эксперта);

раздавать тест-билеты, соблюдая принцип отличия вариантов у ближайших со-

седей;

необходимо контролировать и указывать время тестирования;

проконтролировать правильность заполнения лист-ответа у каждого студента.

10. В случае возникновения спорных моментов и ситуаций, не предусмотренных проце-

дурой тестирования, они должны быть отражены в отчете.

11. По истечении времени тестирования, его необходимо завершить.

12. По окончании тестирования материалы собираются ответственными лицами.

13. Итогом тестирования является формирование (заполнение) отчета (протокол, ведо-

мость) о проведении и результатах тестирования.

14. Обработка результатов тестирования и заполнение отчета производится преподавате-

лем.

15. Протокол печатается (заполняется) и сдается на кафедру в день проведения тестиро-

вания.








КрасГАУ

Приложение К

Тест-билет






ТЕСТ-БИЛЕТ

(для бланкового тестирования)

Институт ____________________________________________________________

Кафедра ____________________________________________________________

Наименование и шифр ООП ____________________________________________________

Дисциплина ____________________________________________________________

КОД

ТЗ

ТЕСТОВОЕ ЗАДАНИЕ

Преподаватель_____________________________/_____________/

Правила оформления тест-билета

Тест-билет предназначен для предъявления тестовых заданий студенту во время тести-

рования.

В колонке «КОД» нужно выставить код тестового задания согласно кодификатору.

Колонка «Тестовое задание» предназначена для размещения в ней тестовых заданий,

которые берутся из банка тестовых заданий

Варианты ответов должны быть пронумерованы. Нумерация ответов не должна являть-

ся подсказкой или правильным вариантом. Когда ответы к закрытым заданиям указывают на








КрасГАУ

устойчивое нарастание или снижение какого-либо качества или свойства, то их лучше упо-

рядочить.

В тестовом задании открытой формы место пропущенного слова, являющегося ответом,

должно быть обозначено, например, пунктиром. Для однозначности понимания подобные

задания могут сопровождаться пояснением, оформленным курсивом и в скобках.








КрасГАУ

Приложение Л

Лист ответа

Вариант 1






ЛИСТ ОТВЕТА


Дисциплина ___________________________________________________________

Курс ____________________________________Группа ________________________________

ФИО _______________________________________________________

Код ТЗ Вариант ответа № Помека преподавателя

Дата________________________________________________________

Студент________________________ /_____________________/

Преподаватель________________________ /_____________________/








КрасГАУ

Продолжение приложения Л

Вариант 2






ЛИСТ ОТВЕТА


Тест по дисциплине_____________________________________________________

Вариант N _____________Дата ___/___/___ Курс _____Группа______

Специальность (напр. подготовки) ______________________________

Шифр специальности □□□□□□

ФИО □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ □ (печатными буквами)

Выбранный номер ответа к заданию обведите кружочком.

№ ответа № ответа № ответа № ответа № ответа

1 1 2 3 4 5 14 1 2 3 4 5 27 1 2 3 4 5 40 1 2 3 4 5 53 1 2 3 4 5

2 1 2 3 4 5 15 1 2 3 4 5 28 1 2 3 4 5 41 1 2 3 4 5 54 1 2 3 4 5

3 1 2 3 4 5 16 1 2 3 4 5 29 1 2 3 4 5 42 1 2 3 4 5 54 1 2 3 4 5

4 1 2 3 4 5 17 1 2 3 4 5 30 1 2 3 4 5 43 1 2 3 4 5 56 1 2 3 4 5

5 1 2 3 4 5 18 1 2 3 4 5 31 1 2 3 4 5 44 1 2 3 4 5 57 1 2 3 4 5

6 1 2 3 4 5 19 1 2 3 4 5 32 1 2 3 4 5 45 1 2 3 4 5 58 1 2 3 4 5

7 1 2 3 4 5 20 1 2 3 4 5 33 1 2 3 4 5 46 1 2 3 4 5 59 1 2 3 4 5

Дата________________________________________________________

Студент________________________ /_____________________/

Преподаватель________________________ /_____________________/








КрасГАУ

Продолжение приложения Л

Правила заполнения и проверки Лист-ответа

Лист ответа – это бланк, предназначенный для записи вариантов ответа студентом и

проверки их правильности преподавателем.

Перед началом тестирования студент должен быть ознакомлен с правилами заполнения

Лист-ответа (пример заполнения можно показать на доске). Студент указывает дисциплину,

курс, группу, свои ФИО, другие необходимые сведения, записи должны быть разборчивы

(лучше печатными буквами).

При ответе на тестовые задания студент должен указать его код в соответствии с Тест-

билетом и номер выбранного варианта ответа. На вопросы необходимо отвечать в той после-

довательности, какая указана в Тест-билете, пропуск не допускается. Если студент затрудня-

ется ответить на вопрос, он все равно надо указать его код без указания варианта ответа. В

случае открытого тестового задания в колонке «Вариант ответа» ответ формулируется само-

стоятельно.

После завершения времени тестирования Листы ответов собираются и проверяются

преподавателем. Колонка «Пометка преподавателя» предназначена для указания преподава-

телем правильности ответов при проверке. Проверка и анализ результатов осуществляется

согласно принятой методике оценивания уровня подготовки специалистов. Ответ считается

правильным, если студент дал абсолютно правильный ответ в соответствии с ключом ответа,

указанного в банке тестовых заданий, частично правильные ответы не рассматриваются, как

правильные. Оценка тестовых заданий дихотомическая (зачет/незачет или +/-).

Пример:

Код ТЗ Вариант ответа (номер) Пометка преподавателя

1 3 -

1.1. Гагарин +

1.1.1. 1,3,2,5,4. +

1.1.2. 1-В, 2-Е, 3-С, 4-А +








КрасГАУ

Приложение М

Методика оценивания уровня подготовки специалистов на соответствие требованиям

ФГОС ВПО, ФГОС СПО (используется при бланковом тестировании)

Целью аттестационного тестирования является оценка соответствия содержания, уровня и качества подготовки выпускников учебного заведения требованиям федеральных государственных образовательных стандартов высшего профессионального образования и среднего профессионального образования (ФГОС ВПО, СПО).

Результат аттестационного педагогического измерения по дисциплине в целом для каждого студента будет представлять собой сумму зачтенных тестовых заданий по всему тесту. Зачтенное тестовое задание соответствует одному баллу.

Поскольку создание заданий, адекватных по трудности требованиям ФГОС ВПО (СПО), является прерогативой эксперта-разработчика контрольного материала, появляется вероятность создания разнотрудных заданий. В связи с этим, решение об освоении дисци-плины студентом принимается и тогда, когда экзаменуемый не выполнил всех заданий из предъявленного набора. Критерием освоения дисциплины для студента является количест-во правильно выполненных заданий теста не менее 50%.Тестовое задание считается за-чтенным, если на него дан абсолютно правильный ответ.

Пример:

№ ФИО студента Количество правильных ответов

(баллов), %

Результат

1. Иванов И.И. 50 Удовл. (дисц. освоена) 2. Сидоров С.С. 40 Неуд.

3. Петров М.М. 60 Удовл. 4. Алексеев А.А. 30 Неуд.

Количество студентов, освоивших дисциплину 2 из 4, это 50 %. Дисциплина освоена (аттестована).








КрасГАУ

Приложение Н

Протокол проверки знаний студентов в ходе самообследования






ПРОТОКОЛ

ПРОВЕРКИ ЗНАНИЙ СТУДЕНТОВ В ХОДЕ

САМООБСЛЕДОВАНИЯ

1. Наименование и шифр ООП 2. Блок дисциплин 3. Дисциплина (по учебному плану)

4. Дата проверки 5. Продолжительность тестирования

6. Курс 7. Группа 8. Количество студентов в группе

9. Количество студентов, принявших участие в тестиро-вании, %

10. Фамилии преподавателей, проводивших проверку знаний

11. Удовлетворительно, %

12. Дополнительные сведения

Дисциплина аттестована (не аттестована)

Подписи преподавателей, проводивших проверку ________________________________

Дата составления протокола _________________________

Утверждаю:

Директор института _____________________ / __________________ /








КрасГАУ

Приложение О

Диаграмма хода действий процесса разработки АПИМ

Разработка АПИМ

Ответственный: автор,

авторский коллектив

Модель АПИМТребования к ТЗ

Бланковые

АПИМ

Пробные

тестирования

Ответственный: автор,

авторский коллектив

Результат

пробного


Пробные


Автор, авторский

коллектив

Оценка валидности,

корректировка

Автор, авторский

коллектив

Протокол

решения

кафедры

Отрицательная

рецензия

Положительная рецензия


рецензия








КрасГАУ

Продолжение приложения О

Проверка на

соответствие

Внешние эксперты

Проверка на

соответствие

Внутренние эксперты

института, МКИ

Рецензии

Отчет о

результатах,

протокол

Утверждение АПИМ

Экспертная комисия, НМС университета

Протокол

Основная

образовательная

программа

Отрицательное

решение

Отрицательное

решение

Положительное решение

Положительная рецензияПоложительное решение


рецензия

Положительное решение

рас : M - kgau.ru · 2014. 10. 1. · 9 Ответственность 11 Приложение...

Documents

Transcript of рас : M - kgau.ru · 2014. 10. 1. · 9 Ответственность 11 Приложение...