Методы экспертной оценки

В основу технологии экспертизы и критериев оценки электронных изданий и ресурсов (ЭИР) А.В. Осина положен опыт Федерального экспертного совета по учебным электронным изданиям Минобразования России, опыт проведения российских фестивалей и конкурсов CD-ROM, а также принятые в мире критерии оценки на международных мероприятиях («Milia», «Festival Audiovisuel International» и др.). В части содержательной экспертизы использовался также многолетний опыт работы Федерального экспертного совета по учебному книгоизданию Минобразования России.

В результате разработана технология, при которой ЭИР подвергается комплексной экспертизе, включающей:

техническую экспертизу;

содержательную экспертизу;

экспертизу дизайн-эргономики.

Таким образом, каждое ЭИР должны исследовать, по меньшей мере, три эксперта разных профилей (на практике по 2-3 эксперта каждого профиля, всего от 6 до 9 человек). Каждый из них заполняет соответствующий Аттестат экспертной оценки, дает оценку рассмотренных качеств продукта в баллах.

Техническая экспертиза оценивает работоспособность ЭИР на программно-технических комплексах различных (по меньшей мере, трех) конфигураций. При этом рассматриваются:

установка/удаление продукта в системе (требуемая память, вторжение в предустановки ОС, корректность автоматической установки стандартного ПО, восстановление предустановок ОС при деинсталляции, удаление собственных элементов и пр.);

функциональное тестирование (работоспособность активных зон, всех заявленных функций, логических переходов, ресурсоемкость и пр.);

качество программной реализации (поведение при провокациях, при запуске параллельных приложений, скорость отклика на запросы и пр.).

Содержательная экспертиза направлена на оценку полноты содержания в предметной области, педагогических качеств ЭИР в традиционной интерпретации. Рассматривается позиционирование издания по виду, предмету, составу материала, характеристики по сравнению с ближайшими аналогами. Аттестат содержательной экспертизы включает:

оценку объема материала и степени разработки темы (соответствие обязательному минимуму по Федеральным стандартам, актуальность, новизна, оригинальность и пр.);

оценку содержания в целом (фактографическая, идеографическая, прагматическая содержательность, фоновое культурное знание, формирование целостной картины и пр.);

педагогическую оценку (соответствие интересам преподавателя, обучаемого, организация материала, культурологическая составляющая и пр.);

методическую состоятельность продукта (оценка используемых методик, системы контроля, соответствие принципам вариативности и пр.).

Экспертиза дизайн-эргономики электронного издания отвечает на главный вопрос: эффективно ли данное издание/ресурс в электронном исполнении? Иначе говоря – нужно ли было делать электронное издание или проще и лучше было бы выпустить книгу. Основное по существу этой экспертизы – искусство разработчиков, их умение использовать новые педагогические инструменты компьютерных технологий обучения – интерактив, мультимедиа, моделинг, коммуникативность, производительность в тех или иных сочетаниях.

Аттестат экспертизы дизайн-эргономики включает оценку:

аудиовизуальных средств и моделинга (полнота использования и гармония средств мультимедиа, оригинальность и качество мультимедиа компонентов, уровень моделирующих программ и пр.);

организации интерактива (способы передачи реакций сторон, оригинальные приемы, интеграция интерактива с мультимедиа и моделингом и пр.);

эргономики, комфортности для пользователя (интуитивная ясность, дружественность, удобство навигации и пр.);

Читайте также:

Пакет школьных методик
В арсенале современного школьного педагога богатые и разнообразные методики научного исследования – педагогические, психологические, социологические, этические… В последнее время они стали доступны, особенно с введением в школу психологической службы. И воспитатель должен их осваивать, максимально ...

Педагогические идеи В.А. Сухомлинского
“Глубоко уважая науку и ученых, я всегда считал себя только практиком, народным учителем”, - писал В. А. Сухомлинский. Эту мысль он сформулировал за несколько лет до смерти, когда уже пользовался репутацией одного из ведущих деятелей советской педагогики. "Многолетний опыт дает мне право утвер ...

Обучение учащихся VII-VIII классов при освоении технологических операций на токарно-винторезном станке как социально-педагогическая проблема
Важнейшей чертой современного производства является все более широкое внедрение гибких, перестраиваемых систем, робототехнических комплексов, что ведет к увеличению творческого начала, когда все шаблонное передается технике, а функция человека перестраивается на разработку и переналадку оборудовани ...