Методы экспертной оценки

В основу технологии экспертизы и критериев оценки электронных изданий и ресурсов (ЭИР) А.В. Осина положен опыт Федерального экспертного совета по учебным электронным изданиям Минобразования России, опыт проведения российских фестивалей и конкурсов CD-ROM, а также принятые в мире критерии оценки на международных мероприятиях («Milia», «Festival Audiovisuel International» и др.). В части содержательной экспертизы использовался также многолетний опыт работы Федерального экспертного совета по учебному книгоизданию Минобразования России.

В результате разработана технология, при которой ЭИР подвергается комплексной экспертизе, включающей:

техническую экспертизу;

содержательную экспертизу;

экспертизу дизайн-эргономики.

Таким образом, каждое ЭИР должны исследовать, по меньшей мере, три эксперта разных профилей (на практике по 2-3 эксперта каждого профиля, всего от 6 до 9 человек). Каждый из них заполняет соответствующий Аттестат экспертной оценки, дает оценку рассмотренных качеств продукта в баллах.

Техническая экспертиза оценивает работоспособность ЭИР на программно-технических комплексах различных (по меньшей мере, трех) конфигураций. При этом рассматриваются:

установка/удаление продукта в системе (требуемая память, вторжение в предустановки ОС, корректность автоматической установки стандартного ПО, восстановление предустановок ОС при деинсталляции, удаление собственных элементов и пр.);

функциональное тестирование (работоспособность активных зон, всех заявленных функций, логических переходов, ресурсоемкость и пр.);

качество программной реализации (поведение при провокациях, при запуске параллельных приложений, скорость отклика на запросы и пр.).

Содержательная экспертиза направлена на оценку полноты содержания в предметной области, педагогических качеств ЭИР в традиционной интерпретации. Рассматривается позиционирование издания по виду, предмету, составу материала, характеристики по сравнению с ближайшими аналогами. Аттестат содержательной экспертизы включает:

оценку объема материала и степени разработки темы (соответствие обязательному минимуму по Федеральным стандартам, актуальность, новизна, оригинальность и пр.);

оценку содержания в целом (фактографическая, идеографическая, прагматическая содержательность, фоновое культурное знание, формирование целостной картины и пр.);

педагогическую оценку (соответствие интересам преподавателя, обучаемого, организация материала, культурологическая составляющая и пр.);

методическую состоятельность продукта (оценка используемых методик, системы контроля, соответствие принципам вариативности и пр.).

Экспертиза дизайн-эргономики электронного издания отвечает на главный вопрос: эффективно ли данное издание/ресурс в электронном исполнении? Иначе говоря – нужно ли было делать электронное издание или проще и лучше было бы выпустить книгу. Основное по существу этой экспертизы – искусство разработчиков, их умение использовать новые педагогические инструменты компьютерных технологий обучения – интерактив, мультимедиа, моделинг, коммуникативность, производительность в тех или иных сочетаниях.

Аттестат экспертизы дизайн-эргономики включает оценку:

аудиовизуальных средств и моделинга (полнота использования и гармония средств мультимедиа, оригинальность и качество мультимедиа компонентов, уровень моделирующих программ и пр.);

организации интерактива (способы передачи реакций сторон, оригинальные приемы, интеграция интерактива с мультимедиа и моделингом и пр.);

эргономики, комфортности для пользователя (интуитивная ясность, дружественность, удобство навигации и пр.);

Читайте также:

Место сюжетно-ролевых игр в системе средств формирования личности
В педагогической теории игры особое внимание уделяется изучению игры как средству воспитания. Игра, несомненно, довольно увлекательное занятие для ребенка, а также важнейшее средство их воспитания и развития. Основополагающим является положение о том, что в дошкольном возрасте игра представляется т ...

Эффективность применения инструментального программного комплекса для построения интеллектуальных тестирующих систем
В современных условиях наряду с традиционным обучением широко используется электронное. Существует большое количество разнообразных компьютерных средств обучения (КСО). Основной способ контроля знаний в КСО – тестирование. Тесты используются не только для измерения учебных достижений, но и для обуч ...

Подготовка детей к восприятию музыки
Учить детей прислушиваться к звучанию погремушки или другого свистящего, шумящего, гремящего, скрипящего, шуршащего и звучащего предмета. Предпринимать действия с этим предметом с помощью взрослого или по образцу, а также самостоятельно. С этой целью учитель подбирает различные предметы, наполняет ...