ПРИКАЗ Минобразования РФ от 17.04.2000 n 1122 (ред. от 22.04.2002) О СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ (вместе с ВРЕМЕННЫМ ПОЛОЖЕНИЕМ О СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ, ИСПОЛЬЗУЕМЫХ ДЛЯ ОЦЕНКИ ЗНАНИЙ ОБУЧАЮЩИХСЯ В ОБРАЗОВАТЕЛЬНЫХ УЧРЕЖДЕНИЯХ РОССИЙСКОЙ ФЕДЕРАЦИИ, МЕТОДИЧЕСКИМИ УКАЗАНИЯМИ ПО ПОДГОТОВКЕ ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ К СЕРТИФИКАЦИИ, ПОЛОЖЕНИЕМ О КООРДИНАЦИОННОМ СОВЕТЕ МИНОБРАЗОВАНИЯ РОССИИ ПО ВОПРОСАМ СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ)

методикам, одобренным Координационным советом и утвержденным Минобразованием России.
14. Оформление результатов сертификации и выдача сертификата проводятся в порядке, утвержденном Координационным советом, и в соответствии с описанной выше процедурой сертификации.
15. Ежегодные отчеты о результатах сертификации (в аннотированной форме) передаются головными учреждениями в Координационный совет.
16. Сертифицированные ПТМ помещаются с согласия заказчика (автора) в информационные базы головных учреждений для создания Федерального фонда ПТМ (банка тестов). Головные организации не обладают правом передачи ПТМ без согласия авторов.
17. Сертификат дает право на использование ПТМ для оценки знаний обучающихся методом тестирования только в соответствии с паспортными данными ПТМ. При любых изменениях, приводящих к нарушению паспортных данных ПТМ, зафиксированных в процессе сертификации ПТМ, сертификат утрачивает силу.
18. При возникновении конфликтных ситуаций, связанных с заключениями экспертов, заказчики работ обладают правом обращаться в Координационный совет с целью назначения дополнительной экспертизы.
Перечень документов и материалов, необходимых
для выполнения сертификации
19. Для проведения экспертизы качества содержания сертифицируемых ПТМ заказчик работ должен представить следующее:
I. Для тестирования, проводимого на бумажных носителях:
1) общие данные о тесте;
2) тексты всех разработанных вариантов тестов в распечатанном виде, готовом для предъявления тестируемым;
3) спецификацию теста;
4) таблицу правильных ответов с критериями оценки (в баллах) за выполнение каждого задания;
5) эмпирические результаты апробации ПТМ в виде матриц (на дискете) с указанием дат проведения тестирования;
6) описание выборки стандартизации, использованной при разработке ПТМ, и основания для ее стратификации с указанием объема выборки;
7) статистические характеристики всех заданий и вариантов теста;
8) шкалу и правила оценки результатов;
9) все сопроводительные материалы по проведению тестирования.
II. Для компьютерного тестирования:
1) структуру и характеристики банка тестовых материалов;
2) распечатки тестовых заданий и отдельных вариантов тестов со всеми имеющимися характеристиками по выбору экспертов;
3) технологию формирования и предъявления теста;
4) демонстрационную версию банка;
5) систему оценивания результатов тестирования.



Приложение N 3
к Приказу
Минобразования России
от 17 апреля 2000 г. N 1122
МЕТОДИЧЕСКИЕ УКАЗАНИЯ
ПО ПОДГОТОВКЕ ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ
МАТЕРИАЛОВ К СЕРТИФИКАЦИИ
С целью подготовки ПТМ к процедуре сертификации заказчики (авторы) самостоятельно оценивают качество содержания ПТМ, проверяют соответствие заданий требованиям тестовой формы и выявляют статистические характеристики ПТМ.
1. Общие данные о ПТМ должны включать:
а) название учебного предмета;
б) название образовательной программы и год обучения;
в) авторский коллектив разработчиков;
г) период разработки (даты начала и конца);
д) даты прохождения экспертизы тестов и тестовых заданий, число экспертов, даты прохождения апробации тестов.
2. Спецификация ПТМ должна включать:
а) цели создания ПТМ (входная аттестация, промежуточная аттестация, итоговая аттестация);
б) перечень специальностей и направлений подготовки, для которых планируется использование ПТМ (в высших и средних специальных учебных заведениях);
в) перечень исходных документов, использованных при разработке ПТМ (ГОС или документы их заменяющие, с указанием года и места издания, наименование программ вступительных испытаний и.т.п.);
г) вид ПТМ (гомогенный или гетерогенный);
д) наименование подхода к разработке ПТМ (нормативно-ориентированный, критериально-ориентированный или смешанный);
е) число заданий в каждом варианте ПТМ;
ж) число вариантов ПТМ;
з) количество и процентное содержание заданий каждой формы;
и) число ответов к заданиям с выбором ответа;
к) вес каждого задания при подсчете баллов испытуемых;
л) время выполнения теста и время выполнения каждого задания;
м) соотношение заданий в каждом варианте ПТМ по разделам (содержательным линиям) и видам деятельности (знаниям, умениям) испытуемых (в виде таблицы и с подробной расшифровкой);
н) способ формирования вариантов ПТМ (кластерная модель или параллельные формы).
3. Статистические характеристики заданий и теста должны включать:
а) данные о трудности заданий в долях правильных ответов испытуемых, процентах правильных ответов или в шкале логитов (при использовании современной теории конструирования тестов);
б) для закрытых заданий теста - статистические данные о дистракторах;
в) для открытых заданий - распределение ответов испытуемых в соответствии со схемой оценки выполнения заданий;
г) данные о дискриминативности заданий, полученные с помощью индекса дискриминативности, точечно-бисериального коэффициента корреляции, параметра дифференцирующей способности заданий теста (при использовании современной теории конструирования тестов);
д) результаты проверки правдоподобности гипотезы о нормальном распределении эмпирических результатов по тесту (для нормативно-ориентированных тестов);
е) нормы (для нормативно-ориентированных тестов), включающие среднее значение сырых баллов, дисперсию и т.д. с указанием временного промежутка действия норм;
ж) критериальный балл (для критериально-ориентированных тестов), сопровождаемый описанием процедуры его получения и результатами его эмпирической валидизации (с указанием временного промежутка действия балла);
з) данные о надежности теста с указанием методов их получения;
и) данные о валидности теста с указанием типа валидности и использованного метода получения оценок;
к) данные анализа корреляционных связей заданий;
л) для гетерогенных тестов данные о результатах факторного анализа, количестве и видах шкал;
м) оптимальное время выполнения теста;
н) данные об информативности теста с точки зрения соответствия целевой информационной функции (если использовалась современная теория конструирования теста).
4. При проведении содержательной экспертизы ПТМ используются следующие критерии:
а) полнота отображения материала образовательной программы при отборе содержания ПТМ;
б) правильность пропорций, выбранных при отображении разделов предмета (содержательных линий);
в) полнота охвата требований государственных образовательных стандартов в ПТМ;
г) соответствие содержания заданий знаниям, умениям и навыкам, запланированным для проверки в спецификации ПТМ;
д) значимость содержания каждого задания ПТМ для целей проверки.
5. Задания сертифицируемых ПТМ рекомендуется разрабатывать в одной из четырех форм:
а) задания с выбором ответов (испытуемый выбирает правильный ответ (ответы) из числа готовых, предлагаемых в задании теста);
б) задания на дополнение (испытуемый сам формулирует краткий или развернутый ответ);
в) задания на установление соответствия между элементами двух множеств;
г) задания на установление правильной последовательности в ряду предлагаемых элементов.
Разрабатываемые задания должны соответствовать ряду требований, которые можно подразделить на общие, инвариантные относительно выбранной формы и на специальные, отражающие специфику форм заданий теста. К общим требованиям относят:
наличие порядкового номера задания, установленного согласно статистическим оценкам трудности и выбранной разработчиком стратегии предъявления заданий теста;
наличие стандартной инструкции, адекватной форме заданий теста;
определенность мест расположения элементов заданий;
наличие эталонов правильных ответов к заданиям (кроме случая использования заданий в открытой форме со свободно конструируемым ответом) и правил, выбранных разработчиком для оценки результатов выполнения теста с обоснованием выбора весовых коэффициентов, если они имеются.
В отличие от общих специальные требования довольно многочисленны. Они излагаются в пособиях по тестовой проблематике, а также в развернутых методических рекомендациях, которые выдаются заказчикам после заключения договора на сертификацию ПТМ.
В сертифицируемых ПТМ допускается сочетание различных форм. В том случае, когда формы чередуются, соответствующим образом должна меняться инструкция к заданиям теста.
При подготовке материалов для сертификации рекомендуется использовать пособия по тестовой проблематике, приведенные ниже.
Рекомендуемая литература:
1. Анастази А., Психологическое тестирование, пер. с англ., в 2 кн. - М.: Педагогика, 1982.
2. Аванесов В.С. Композиция тестовых заданий. Учебное пособие. - М.: Ассоциация инженеров-педагогов, 1996.
3. Клайн П., Введение в психометрическое программирование. Справочное руководство по конструированию тестов. - Киев, 1994.
4. Столин В.В., Шмелев А.Г. Дифференциальная психометрика. - М.: МГУ, 1984.
5. Челышкова М.Б. Разработка педагогических тестов на основе современных математических моделей. Учебное пособие. - М.: И. Ц, 1995.
6. Челышкова М.Б., Ковалева Г.С. Теория и практика конструирования педагогических тестов. Учебное пособие.
Рекомендации подготовлены группой авторов в составе: М.Б. Челышкова, Г.С. Ковалева, А.О. Татур.



Приложение N 4
к Приказу
Минобразования России
от 17 апреля 2000 г. N 1122
ПОЛОЖЕНИЕ
О КООРДИНАЦИОННОМ СОВЕТЕ МИНОБРАЗОВАНИЯ РОССИИ
ПО ВОПРОСАМ СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ
ТЕСТОВЫХ МАТЕРИАЛОВ
1. Координационный совет Минобразования России по вопросам сертификации качества педагогических тестовых материалов (далее - Координационный совет) является государственно-общественным органом Министерства образования Российской Федерации, действующим в целях научно-методического обеспечения и контроля процесса сертификации качества педагогических тестовых материалов (далее - ПТМ).
2. Координационный совет создается, реорганизуется и ликвидируется приказом Минобразования России.
В состав Координационного совета входят ведущие специалисты в области тестирования, представители научно-исследовательских организаций и учреждений системы образования и Минобразования России.
3. Координационный совет возглавляет председатель. Подготовку заседаний Координационного совета и доведение принятых им решений до сведения заинтересованных организаций осуществляет ученый секретарь.
4. Координационный совет в своей деятельности руководствуется:
законодательными актами Российской Федерации,
постановлениями Правительства Российской Федерации в области образования,
нормативно-правовыми актами Минобразования России,
настоящим Положением.
5. Основными задачами и функциями Координационного совета являются:
осуществление контроля за соблюдением требований к качеству ПТМ в процессе сертификации, а также за обоснованностью результатов экспертизы качества сертифицируемых ПТМ,
выявление проблем и трудностей, замедляющих становление процесса сертификации ПТМ,
внесение предложений в программы работ головных учреждений в системе Минобразования России по сертификации качества ПТМ, в области сертификации ПТМ и определение приоритетных направлений их деятельности по сертификации (ежегодно);
обсуждение отчетов головных учреждений в системе Минобразования России по сертификации качества ПТМ и их утверждение (ежегодно);
согласование перечня документов и материалов, представляемых заказчиком, а также требований к качеству ПТМ;
согласование методик экспертизы качества ПТМ;
утверждение формы бланка сертификата ПТМ;
разработка рекомендаций по совершенствованию процесса сертификации ПТМ, в том числе определение приоритетных научно-исследовательских работ по расширению и совершенствованию процесса и системы сертификации ПТМ;
рассмотрение случаев апелляций со стороны заказчиков;
определение порядка оформления и выдачи сертификатов.
6. Координационный совет в соответствии с возложенными на него задачами имеет право получать отчеты головных учреждений в системе Минобразования России по сертификации качества ПТМ, документы и материалы Минобразования России и другую необходимую информацию по вопросам разработки и использования тестов.
7. Члены Координационного совета и члены экспертных групп должны соблюдать принцип конфиденциальности по отношению к содержательной части ПТМ, представленных на экспертизу, и результатам экспертизы для внешних пользователей.
8. Работа Координационного совета проводится по плану. Заседания Координационного совета проводятся не реже одного раза в два месяца. Решения Координационного совета принимаются большинством голосов членов совета, если на заседании присутствует не менее 2/3 членов совета.

ПРИКАЗ Минобразования РФ от 17.04.2000 n 1122 О СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ (вместе с ВРЕМЕННЫМ ПОЛОЖЕНИЕМ О СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ, ИСПОЛЬЗУЕМЫХ ДЛЯ ОЦЕНКИ ЗНАНИЙ ОБУЧАЮЩИХСЯ В ОБРАЗОВАТЕЛЬНЫХ УЧРЕЖДЕНИЯХ РОССИЙСКОЙ ФЕДЕРАЦИИ, МЕТОДИЧЕСКИМИ УКАЗАНИЯМИ ПО ПОДГОТОВКЕ ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ К СЕРТИФИКАЦИИ, ПОЛОЖЕНИЕМ О КООРДИНАЦИОННОМ СОВЕТЕ МИНОБРАЗОВАНИЯ РОССИИ ПО ВОПРОСАМ СЕРТИФИКАЦИИ КАЧЕСТВА ПЕДАГОГИЧЕСКИХ ТЕСТОВЫХ МАТЕРИАЛОВ)  »
Постановления и Указы »
Читайте также