Специалисты по мониторингу выделяют ряд условий его эффективности:
• системный подход, обеспечивающий слаженную работу механизма по сбору, обработке, анализу и интерпретации информации;
• сочетание количественных и качественных методов измерений в мониторинге;
• преимущественная ориентация системы показателей, по которым проводится мониторинг, на практику и методы обучения, поддающиеся воздействиям со стороны преподавателей и руководства вуза;
• достаточная полнота совокупности показателей, учет различных факторов, в том числе и косвенно влияющих на результаты обучения;
• корректная интерпретация данных мониторинга с учетом различных влияний и связей между показателями;
• репрезентативность выборочных совокупностей студентов, принимающих участие в мониторинге;
• широкое привлечение к проведению мониторинга квалифицированных специалистов и преподавателей вуза;
• использование качественного инструментария и современного программного обеспечения для обработки и анализа данных мониторинга;
• наличие необходимой материально-технической базы (статистических пакетов для обработки данных, техники и т.д.);
• методическая и финансовая помощь со стороны администрации вуза.
Таким образом, даже если отвлечься от негативных последствий мониторинга и принять идею его проведения, придется решать много сложных проблем. Необходимо беспокоиться о проектировании системы мониторинга и выборе его модели, компетентности организаторов и участников, финансовых затратах, определении показателей, по которым будут собраны данные, методиках анализа данных, определении круга пользователей и структурирования данных по различным уровням доступа, выборе вида представления данных, методах их интерпретации и т.д. Нужно также договориться о направлениях использования данных мониторинга, поскольку его результаты можно применять как для поощрений, так и для санкций против отдельных преподавателей или кафедр в вузе. Для успешной работы по проведению мониторинга все эти соображения следует принять во внимание.
В целом можно утверждать следующее.
• Системы мониторинга могут вносить значительный позитивный вклад в работу как преподавателей, так и управленцев. Мониторинг выполняет множество функций, релевантных повышению качества обучения и уменьшению несправедливости, вызванной субъективизмом преподавателей и управленцев в образовании.
• Системы мониторинга могут стимулировать развитие многочисленных позитивных тенденций, они позволяют оценить эффективность различных инноваций в образовании.
• Данные мониторинга не заменяют прочую информацию, необходимую для принятия управленческих решений в образовании. Их следует использовать совместно с другими данными о системе образования, собранными в результате бесед со штатом преподавателей и студентов.
• При проведении мониторинга следует учитывать не только его позитивные возможности, но и вероятные негативные последствия. Преодолеть негативные результаты внедрения систем мониторинга в образование можно в том случае, если управленцы и педагоги заранее осведомлены о сложностях мониторинга и ограничениях на использование его данных, а сам мониторинг проводится в соответствии с научно-обоснованными методиками и технологиями в условиях четкой определенности перечня сообщаемых результатов на каждом уровне доступа к ним.
1.7. Эвалюация в образовании
Термин «эвалюация» (в англоязычной литературе – evaluation) не распространен в отечественной педагогической науке, хотя он широко используется в большинстве зарубежных стран, имеющих высокоразвитые системы управления качеством образования. Впервые этот термин появился в литературе на русском языке в 2001 г., когда авторы книги «Педагогическое образование в университете: контекстно-биографический подход» попытались проанализировать трактовку понятия «эвалюация» с опорой на работы немецких ученых и педагогов [6]. Современная трактовка этого термина в образовании не отождествляет его исключительно с процессом получения оценок, как можно решить по результату прямого перевода (evaluation – оценка, оценивание), а рассматривает его гораздо шире, считая эвалюацию интегративной категорией оценочно-аналитической деятельности в различных проектах по управлению качеством образования [10].