Методы экспертной оценки

В основу технологии экспертизы и критериев оценки электронных изданий и ресурсов (ЭИР) А.В. Осина положен опыт Федерального экспертного совета по учебным электронным изданиям Минобразования России, опыт проведения российских фестивалей и конкурсов CD-ROM, а также принятые в мире критерии оценки на международных мероприятиях («Milia», «Festival Audiovisuel International» и др.). В части содержательной экспертизы использовался также многолетний опыт работы Федерального экспертного совета по учебному книгоизданию Минобразования России.

В результате разработана технология, при которой ЭИР подвергается комплексной экспертизе, включающей:

техническую экспертизу;

содержательную экспертизу;

экспертизу дизайн-эргономики.

Таким образом, каждое ЭИР должны исследовать, по меньшей мере, три эксперта разных профилей (на практике по 2-3 эксперта каждого профиля, всего от 6 до 9 человек). Каждый из них заполняет соответствующий Аттестат экспертной оценки, дает оценку рассмотренных качеств продукта в баллах.

Техническая экспертиза оценивает работоспособность ЭИР на программно-технических комплексах различных (по меньшей мере, трех) конфигураций. При этом рассматриваются:

установка/удаление продукта в системе (требуемая память, вторжение в предустановки ОС, корректность автоматической установки стандартного ПО, восстановление предустановок ОС при деинсталляции, удаление собственных элементов и пр.);

функциональное тестирование (работоспособность активных зон, всех заявленных функций, логических переходов, ресурсоемкость и пр.);

качество программной реализации (поведение при провокациях, при запуске параллельных приложений, скорость отклика на запросы и пр.).

Содержательная экспертиза направлена на оценку полноты содержания в предметной области, педагогических качеств ЭИР в традиционной интерпретации. Рассматривается позиционирование издания по виду, предмету, составу материала, характеристики по сравнению с ближайшими аналогами. Аттестат содержательной экспертизы включает:

оценку объема материала и степени разработки темы (соответствие обязательному минимуму по Федеральным стандартам, актуальность, новизна, оригинальность и пр.);

оценку содержания в целом (фактографическая, идеографическая, прагматическая содержательность, фоновое культурное знание, формирование целостной картины и пр.);

педагогическую оценку (соответствие интересам преподавателя, обучаемого, организация материала, культурологическая составляющая и пр.);

методическую состоятельность продукта (оценка используемых методик, системы контроля, соответствие принципам вариативности и пр.).

Экспертиза дизайн-эргономики электронного издания отвечает на главный вопрос: эффективно ли данное издание/ресурс в электронном исполнении? Иначе говоря – нужно ли было делать электронное издание или проще и лучше было бы выпустить книгу. Основное по существу этой экспертизы – искусство разработчиков, их умение использовать новые педагогические инструменты компьютерных технологий обучения – интерактив, мультимедиа, моделинг, коммуникативность, производительность в тех или иных сочетаниях.

Аттестат экспертизы дизайн-эргономики включает оценку:

аудиовизуальных средств и моделинга (полнота использования и гармония средств мультимедиа, оригинальность и качество мультимедиа компонентов, уровень моделирующих программ и пр.);

организации интерактива (способы передачи реакций сторон, оригинальные приемы, интеграция интерактива с мультимедиа и моделингом и пр.);

эргономики, комфортности для пользователя (интуитивная ясность, дружественность, удобство навигации и пр.);

Читайте также:

Классификация видов самостоятельной работы учащихся
Под самостоятельной работой учащихся мы понимаем такую работу, которая выполняется учащимися по заданию и под контролем учителя, но без непосредственного его участия в ней, в специально предоставленное для этого время. При этом учащиеся сознательно стремятся достигнуть поставленной цели, употребляя ...

Методы диагностики особенности воспитания единственного ребенка в семье на констатирующем этапе эксперимента
В первой главе мы теоретически обосновали особенности воспитания единственного ребенка в семье младшего школьного возраста. Исходя из этого, нами было проведено исследование, в ходе которого необходимо осуществить диагностику, которая позволяет выявить, что если семья воспитывает единственного ребе ...

Нормативно-правовые акты, защищающие права слабослышащих детей
Прошло немногим более полутора десятков лет с того момента, как ребенок стал особым и самостоятельным субъектом права. За 11 лет до окончания столетия, человеческое сообщество, дабы не лишиться надежды на свое лучшее будущее, приняло соглашение, которое на международном уровне определило основные п ...