Считаете ли вы результаты экзамена достаточно надежными? Если бы вам пришлось сдавать экзамен онлайн, воспользовались бы вы функцией мониторинга?
Прокторинг: что нужно знать hr-у
В русскоязычном сообществе нет четкого и единого определения, да и сам термин для многих является новым, хотя подобные технологии разрабатываются уже несколько лет. Тем не менее, общее определение может быть следующим: Наблюдение — это автоматизированный процесс мониторинга и контроля удаленного тестирования.
Наблюдение появилось благодаря электронному обучению: необходимо было технологически контролировать студентов на онлайн-экзаменах, чтобы убедиться, что они не списывают. Сейчас это развивается не только в образовании, но и в кадровой сфере — результаты электронных тестов для сотрудников также необходимо защищать от возможной фальсификации.
Организация тестовой сессии зависит от провайдера, но основные принципы остаются неизменными. Система собирает данные с камеры, микрофона и экрана компьютера сдающего тест, анализирует историю тестирования, подтверждает личность и фиксирует возможные нарушения. В конце организатор теста получает видеозапись процесса и оценку достоверности полученных результатов.
Как работает система прокторинга
Услуга предназначена для автоматического мониторинга и пресечения следующих распространенных нарушений:
- Замена респондента. Программа отличает одного человека от другого на основе оригинальной фотографии профиля и сообщает о замене. В спорных случаях организатор может ссылаться на видеозапись.
- Копирование электронных или физических носителей. Программа «замечает» отсутствие человека в контексте. Кроме того, система контролирует линию зрения человека и следит за тем, чтобы фокус не менялся. Он также обнаруживает попытки переключения активного приложения и вкладок браузера.
- Данные. Технология определяет окружающий шум и присутствие постороннего человека на изображении.
- Кража содержимого. Попытки копирования и сохранения элементов теста блокируются.
Что происходит в случае обнаружения несанкционированного доступа? Организатор решает, как должна вести себя программа:
- Сообщите обвиняемому о выявленном нарушении и разрешите ему/ей продолжить,
- Немедленно остановите тест,
- Автоматически останавливайте тест, когда общий уровень доверия падает ниже определенного уровня.
Какие технологии используются в системе онлайн прокторинга?
Программное обеспечение анализирует большое количество поступающих данных. Сюда входят видео, аудио и события в браузере респондента. Она использует машинное обучение — класс методов искусственного интеллекта — специальные алгоритмы и обученные модели, которые способны выявлять нарушения в режиме реального времени.
Помимо технических возможностей системы, стоит упомянуть и ее психологическое воздействие. Зная, что за вами следят, вы перестанете пытаться обманывать. Да и сам факт того, что за вами наблюдают, является большим подспорьем в обеспечении достоверности результатов теста.
Чтобы вернуться к тестированию: Следует подчеркнуть, что он решает конкретную проблему, для которой предназначен, не больше и не меньше. Но делает это хорошо: просто и технологично, занимая достойное место среди современных, автоматизированных и удобных HR-решений.
Что такое прокторинг и почему с ним лучше
Личный контакт с преподавателем (особенно на экзамене) многих пугает, как и ожидание за дверью, тишина и пристальный взгляд экзаменатора, следящего за каждым движением. Это стоит того, если преподаватель только подозревает, что он или она копирует. Возможно, он или она передали студента на повторное обследование. Это вносит определенную субъективность.
С электронным тестированием все стало объективнее и проще.
Контроль — это система управления в электронном экзамене/тесте. Он контролируется проктором, администратором, который наблюдает за процессом через камеру.
Электронная прокторинг позволяет подтвердить личность студента, избежать использования дубликатов и помочь преподавателю объективно оценить уровень знаний студента.
В Америке эта система была введена еще в 2008 году.
Сегодня технология аудита высоко развита. Существует 3 типа мониторинга онлайн-тестов:
- Супервайзер-человек: администратор наблюдает за процессом с помощью камеры и фиксирует нарушения.
- Автоматический мониторинг: программа автоматически определяет личность ученика, следит за его поведением, отслеживает линию взгляда, анализирует появление посторонних предметов и шумов в помещении, ищет нарушения на видеозаписи и создает отчеты на основе полученных данных.
- Комбинированный метод: программное обеспечение и человек. Могут быть разные варианты. Например, весь процесс может контролироваться программным обеспечением, которое предупреждает супервайзера о нарушениях. Другая возможность заключается в том, что администратор сам находится в режиме онлайн и следит за деятельностью нескольких студентов программы одновременно. Второй способ считается более надежным.
Университет может использовать синхронный мониторинг с помощью Examus (или другого синхронного мониторинга) и асинхронный мониторинг (система записывает весь процесс в случае нарушений, не прерывая экзамен, а запись затем просматривается специальными лицами).
Как проходит экзамен во время прокторинга
Обследования в системе мониторинга могут проводиться в любом месте, где есть надежный интернет и камера. Студент должен заранее установить на свой компьютер специальное программное обеспечение для записи экрана.
Процедура выполняется следующим образом:
- Включите компьютер примерно за 20 минут до начала и войдите в систему.
- Протестируйте устройство на соответствие техническим требованиям, если устройство проходит тесты (порты не закрыты, доступ запрещен).
- Войдите в систему видеотрансляции и дайте системе разрешение на запись с экрана компьютера.
- Подтвердите свою личность, показав камере документы (водительское удостоверение или паспорт).
- Покажите комнату и свой стол (по требованию руководителя) и пройдите осмотр.
Что запрещено делать во время прокторинга
Существует четкая процедура, которой вы можете следовать в системе наблюдения во время обследования. Например, вы можете пользоваться своими рукописными заметками и звонить контролеру в случае технических проблем (отсутствие интернета, отключение электричества и т.д.).
Что вы не можете сделать:
- Перейдите на другие вкладки браузера,
- носить наушники,
- пользоваться советами или помощью третьих лиц во время экзамена,
- приходить без предупреждения или звонить по телефону.
Если экзаменатор обнаружит хотя бы одно нарушение, он/она запишет все нарушения в журнал и направит замечания профессору. Если студент совершает несколько серьезных нарушений одновременно или не реагирует на замечания экзаменатора, экзамен может быть отменен или даже удален.
Особо продвинутые студенты загружают программное обеспечение для отображения экрана. И когда начинается экзамен, ассистент студента уже видит все, что видит студент на экране. И он получает правильный ответ через тот же микрофон.
Как работает система контроля за обучением?
Внешне система управления обучением выглядит просто. Специальные алгоритмы собирают и анализируют данные с видеоканала, аудиоканала и рабочего стола ученика. Для этого проверяемый работник должен соответствовать нескольким требованиям
- Доступ к камере и микрофону на своем компьютере,
- Обеспечьте стабильное подключение к Интернету,
- Сфотографируйтесь и идентифицируйте себя (паспорт, водительское удостоверение, кредитная карта).
Программа автоматически делает фотографию пользователя перед началом теста и сравнивает его с фотографией в профиле. Проверка личности и анализ клавиатурного почерка проводятся постоянно. Во время теста ИИ может заметить, что пользователь отводит взгляд от экрана, разговаривает с другим человеком, переключает экран и т.д. Не следует полагать, что дистанционное тестирование может выявить только самые серьезные нарушения. Система обеспечения качества выявляет случаи, когда:
- пользователь закрывает рот или другие части лица,
- другие лица появляются на изображении,
- рядом с тестируемым слышны другие человеческие голоса,
- человек использует другое оборудование,
- в кадре видны книги или заметки,
- Пользователь меняет вкладки в браузере,
- Общение происходит с помощью жестов.
Данные из всех источников собираются в единый файл. Все подозрительные инциденты классифицируются по различным группам и о них сообщается. Он показывает, когда именно было зафиксировано нарушение. Администратор может не только просмотреть статистику возможных нарушений, но и проверить записи с камеры, микрофона и рабочего стола.
Можно интегрировать функции аудита на уровне API и пользовательского интерфейса с LMS (Remote Learning Platform) или, наоборот, добавить LMS в систему аудита. Например, платформа Equio Learning Platform поддерживает интеграцию сторонних сервисов. Руководитель может установить на него систему аудита с помощью службы поддержки. Это помогает сделать аудит максимально честным и прозрачным.
Как мы уже писали в самом начале, экзамены оказывают значительное психологическое воздействие. Когда сотрудники знают, что за ними будут наблюдать во время тестов, они более ответственно относятся к обучению. Это означает, что уровень их профессиональных знаний и эффективность онлайн-курсов будут выше.
Вот еще 5 преимуществ использования электронной викторины в обучении на рабочем месте:
- Экономьте время и деньги. Чтобы организовать викторины в автономном режиме, необходимо найти помещение и привлечь людей, которые будут контролировать процесс. При проведении онлайн-экзаменов вам достаточно один раз зарегистрироваться и настроить тест, чтобы получить одинаково надежные результаты.
- Масштабируемость. Тысячи или даже десятки тысяч работников могут проходить тестирование одновременно. И их количество может измениться в любой момент. Нет необходимости искать более просторное помещение или нанимать дополнительный персонал для проведения испытаний.
- Никакого стресса. Некоторые работники могут давать неправильные ответы, потому что они нервничают. Гораздо комфортнее сдавать тесты в привычной обстановке, так стресс не влияет на результаты.
- Отсутствие человеческого фактора. Личные отношения между сотрудниками и руководителями могут исказить результаты тестирования. Преданный участник теста может не «заметить» нарушения, в то время как с искусственным интеллектом это невозможно.
- Быстрые результаты. Алгоритм мгновенно проверяет ответы и отфильтровывает подозрительные записи, которые можно просмотреть вручную.
Современные платформы LMS позволяют легко организовать удаленное обучение и тестирование сотрудников. А благодаря мониторингу организацию тренировочных тестов можно доверить специальной программе. Это максимально разгружает отдел кадров и экономит деньги. О том, как еще можно контролировать эффективность онлайн-курсов для компаний, можно прочитать в статье Мониторинг обучения сотрудников.
