как узнать результаты examus
Не дайте себя обмануть: как проверяют результаты онлайн-курсов
Какие экзамены уже можно сдавать по Интернету, а какие нельзя, какие меры безопасности предпринимаются, чтобы никто не списывал, и сможет ли когда-нибудь ЕГЭ перейти в онлайн, Indicator.Ru рассказал Дмитрий Истомин, руководитель проекта «Экзамус».
Компания разрабатывает программное обеспечение для контроля экзаменационных испытаний, которые проводятся в режиме онлайн. Проект «Экзамус» начинался с нуля и был запущен в феврале 2015 года, а уже в августе в тестовом режиме программа применялась на первых вступительных экзаменах в Уральский федеральный университет. В октябре того же года проект получил грант Фонда содействия инновациям. На эти средства была доработана первая версия системы.
Как это работает?
Организаторы дистанционного образования часто сталкиваются с недоверием к такой форме обучения: как гарантировать, что «студенты» выполняют задания самостоятельно, не списывают и ни с кем не советуются? Частично эту работу можно переложить на компьютерную программу. «Мы проверяем, что люди сдают честно, самостоятельно, что они не подглядывают в шпаргалки и не пользуются, например, смартфоном для поиска верных ответов. В результате организация, которая выдает сертификат об успешном прохождении курса, может с достаточной степенью уверенности гарантировать, что этот сертификат соответствует полученным знаниям», — рассказал Дмитрий Истомин.
Дмитрий Истомин, руководитель проекта «Экзамус»
Предлагаемый алгоритм может по видео с web-камеры обнаружить сразу несколько ситуаций, которых на экзамене следует избегать. Так, он может по лицу тестируемого определить попытку сдать экзамен за другого студента или сообщить наблюдателю, что сдающий слишком часто смотрит в сторону и, вероятно, списывает. Программа может заметить и смену активного окна на компьютере студента, и появление перед монитором постороннего человека. Алгоритм можно настроить для каждого сдающего: действия человека во время экзамена сравниваются с обычным для него поведением. За время учебы программа запоминает характерный для каждого студента стиль поведения, скажем, насколько часто он отводит взгляд. Например, если студент всегда сосредоточен на заданиях и вдруг начинает подолгу смотреть в сторону, скорее всего, это неспроста.
Впрочем, доверять весь процесс только программе пока не стоит. Обычно за студентами наблюдает и человек — проктор. Он может быть сотрудником образовательной организации или самого «Экзамуса». Проктор подтверждает, что экзамен сдает именно тот человек, который и должен, сравнивая его лицо с фотографией в паспорте, и реагирует на сигналы системы о том, что кто-то, кажется, пытается ее обмануть. На одного наблюдателя приходится в среднем шесть-девять студентов.
За тем, как студенты сдают экзамен и какие результаты получают, могут следить и преподаватели, и на основе наблюдений корректировать задания или форму экзамена.
Где применяется?
Алгоритм можно использовать в нескольких случаях. В системе высшего образования дистанционно можно сдавать вступительные экзамены в бакалавриат и магистратуру, в том числе для иностранных студентов, и внутренние экзамены (сессию). Для этого системой прокторинга уже пользуются ВШЭ, МФТИ, СПбГУ, МИФИ, Санкт-Петербургский политехнический и Уральский федеральный университеты. Само собой, удаленно сдаются тесты в конце курсов дистанционного образования, в том числе на Национальной платформе открытого образования, а также при обучении сотрудников многих компаний (курсы повышения квалификации). Был, по словам Истомина, и случай, когда заказчиком выступила школа, проводившая дистанционно вступительные экзамены.
Компания планирует сотрудничать с работодателями, которые нанимают людей в разных городах (например, для сети магазинов) и хотят быть уверены в результатах онлайн-тестов для будущих сотрудников.
Впрочем, некоторые экзамены, например ЕГЭ, в таком формате проводить нельзя. «ЕГЭ, конечно же, регулируется отдельными регламентами, отдельными законами. Я пока не слышал, чтобы были какие-то варианты сдачи единого госэкзамена через Интернет. Я, конечно, верю, что рано или поздно хотя бы часть ЕГЭ будут сдавать онлайн, например, дети с ограниченными возможностями, из труднодоступных населенных пунктов, из-за рубежа».
В целом, по словам Истомина, граница между тем, что можно переводить в онлайн, а что нельзя, постепенно стирается. «Понятно, что есть дисциплины, требующие проверки конкретных навыков, например, у медиков. Естественно, что это нужно делать очно. Но практически все, что является проверкой знаний, сейчас можно проверять онлайн».
А можно ли доверять?
По данным разработчиков, установить личность студента можно с точностью 99,8%, если сравнивает алгоритм, а его вывод подтверждает проктор. «Фактически все ведущие вузы, которые занимаются онлайн-образованием, с нами работают и нам доверяют. Я считаю это достаточным основанием и референсом для других вузов, уже пора бы и начать доверять», — настаивает Истомин. И предлагает оглянуться на опыт, например, США, где подобные системы используются уже почти десять лет: «Если и есть вопрос доверия, то это скорее какие-то субъективные факторы». Впрочем, по словам руководителя компании, онлайн-обучение и в России используется широко, другое дело, что не всегда организация, проводящая онлайн-курсы, заинтересована в качественном контроле знаний. Таким образом, системы прокторинга применяются не везде, где они необходимы.
Распространению новых технологий в высшем образовании помогает и Министерство образования и науки, в рамках проекта «Современная цифровая образовательная среда», утвержденного в октябре 2016 года. Его цель — создать среду для непрерывного образования. «Экзамус» вместе с НИУ ВШЭ и УрФУ участвует в разработке методик повышения качества онлайн-обучения.
В то же время компания продолжает искать способы повысить надежность алгоритма. Так, к распознаванию лица теоретически можно добавить идентификацию по клавиатурному почерку (особенностям набора пароля: как быстро, с какими паузами между нажатиями клавиш), по голосу, по движению мыши. Эти методы имеют свои недостатки, но в будущем вполне могут стать дополнительной защитой от мошенничества.
Прокторинг. Что? Где? Когда? (часть I)
Начнем!
В этой статье мы разберем наш сервис онлайн-прокторинга:
TL;DR. Если совсем нет времени читать статью, но хочется узнать поподробнее про прокторинг, посмотрите наш короткий ролик:
I. Понятие прокторинга
II. Как работает система, и как проходит экзамен
Сервис интегрируется в систему тестирования или СДО (систему дистанционного обучения).
Сервис онлайн-прокторинга Экзамус работает по технологии SaaS (Software as a Service), вся инфраструктура хранится в облачных сервисах. Студенту не нужно ничего устанавливать на компьютер, достаточно открыть браузер, зайти по нужной ссылке, пройти системную проверку, идентификацию личности и начать сдавать экзамен.
После этого студент может начать экзамен. При этом, система транслирует информацию из 3 источников:
камеры;
микрофона;
рабочего стола компьютера.
После завершения экзамена система «соберет» их в единую комбинированную запись.
Во время экзамена система автоматически фиксирует такие типы нарушений как:
— увод взгляда, если пользователь смотрит за пределы экрана. — отсутствие лица в кадре, если пользователь не в поле зрения камеры полностью, или не видно лица полностью. — наличие других лиц в кадре, рекомендуется также убрать из поля зрения портреты великих людей на стене, они могут быть автоматически распознаны как посторонние. — подмена тестируемого, если лицо в кадре не принадлежит лицу, сдающему экзамен. — любые человеческие голоса в кадре, даже если это голос сдающего, ведь сдающий может надиктовывать вопросы для «слива» информации другому человеку. — смена окон на рабочем столе пользователя, если пользователь решил переключиться из теста в поисковую систему или открыть постороннее приложение.
— использование телефонов, планшетов и прочих технических средств, — использование TeamViewer, Skype, RemoteAdmin и любых программ для трансляции рабочего стола, — использование виртуальных машин и тонких клиентов для сдачи экзамена посторонним человеком, — использование книг, конспектов, черновиков, — использование калькуляторов (если это запрещено), — невербальное общение (подмигивания, знаки руками, кивки головы и т.д).
Экзамус автоматически отмечает все потенциальные нарушения правил в отчете. Каждая запись о нарушении содержит в себе информацию о типе нарушения, например, увод взгляда от экрана или смена окна, и временную метку.
То есть, мы сразу можем определить, кого точно стоит проверить в первую очередь.
Таким образом, по итогам экзамена по каждому участнику мы можем:
посмотреть и послушать запись с камеры, микрофона и рабочего стола;
посмотреть в хронологическом порядке все потенциальные нарушения;
нажав на любое нарушение, посмотреть на записи, что происходило в данный конкретный момент.
Под каждый режим разработаны свои интерфейсы и методологии работы прокторов, но об этом более подробно мы расскажем в следующих статьях.
III. Режимы прокторинга
1. Автоматический, то есть без участия человека-проктора.
Очевидным преимуществом этого режима является сокращение затрат на организацию экзаменов.
Но во многих ситуациях участие человека незаменимо:
Под каждый режим разработаны свои интерфейсы и методологии работы прокторов, в одной из статей мы подробнее остановимся на них.
Итак, мы с вами поняли, что такое прокторинг, как в целом работает система, узнали какие режимы прокторинга существуют.
В следующей части мы разберем, какие технологии используются в системе.
Пишите в комментариях, какие темы вам интересны.
Подготовка и прохождение экзамена с прокторингом в системе Examus: алгоритм для студентов
Важно
Срочную помощь по техническим вопросам, связанным с прокторингом, оказывает служба поддержки Дирекции по онлайн-обучению: elearn@hse.ru
Перед экзаменом
1. Убедиться в наличии технических возможностей для прохождения экзамена
Если у Вас нет технических возможностей для прохождения экзамена, обязательно сообщите об этом в учебный офис своей ОП
2. Проверить компьютер
Обязательно проверьте технические настройки своего компьютера здесь
Если вдруг Ваш компьютер не проходит проверку:
3. Изучить инструкции и правила проведения экзамена
Инструкции и правила проведения экзамена доступны:
4. Пройти пробный тест (если он предусмотрен)
Ссылка на пробный тест будет направлена преподавателем
5. Пройти повторную проверку компьютера
Очень важно пройти повторную проверку настроек компьютера за 24 часа до экзамена здесь (через синюю кнопку «Сессия НИУ ВШЭ»)
Вход в систему осуществляется с адресом корпоративной эл.почты, в поле пароль так же указывается адрес эл.почты
После первого входа в систему рекомендуется сменить пароль
6. Убедиться в наличии необходимого оборудования и паспорта перед экзаменом
Во время экзамена необходимо предъявить оригинал паспорта. Убедитесь, что он у Вас есть.
Ответ на вопрос «Зачем нужно показывать паспорт» здесь
Во время экзамена
1. Подготовить помещение и технику
В комнате должно быть светло. Если Вы сдаете экзамен вечером, то включите в комнате свет
Уберите со стола лишние предметы ( в том числе бумаги, наушники, телефон)
2. Перейти по ссылке для начала экзамена
Перейти по ссылке https://hse.student.examus.net и авторизоваться через синюю кнопку «Сессия НИУ ВШЭ»
Доступ к вашему экзамену появится в стартовом окне за 5–10 минут до начала экзамена
Не стоит заходить в систему слишком рано — Вы увидите надпись: «Время вашего экзамена еще не наступило или у вас нет назначенных экзаменов»
В случае каких-то проблем и задержек на старте учтите, что Вы сможете начать экзамен только в течение первых 30 минут. После этого начало экзамена в системе станет недоступным
3. Подтвердить свое согласие с правилами проведения
Нужно подтвердить свое согласие с правилами проведения онлайн-тестирования (поставить нужные галочки)
4. Пройти идентификацию личности
5. Показать проктору комнату и рабочий стол
Это необходимо для того, чтобы проктор убедился, что в комнате нет других людей, которые могут подсказывать, а на столе нет шпаргалок
Возьмите в руки веб-камеру или ноутбук, продемонстрируйте стол, комнату и верните камеру на место так, чтобы Вас было видно в окошке на панели прокторинга Examus по грудь
Если у Вас моноблок (камера не снимается), то возьмите мобильный телефон, сфотографируйте ваш рабочий стол и покажите фото в камеру. После этого обязательно уберите телефон со стола
Проктор может попросить вас продемонстрировать экран ноутбука или компьютера, сфотографировав его на телефон
Если можно пользоваться черновиками — до начала экзамена нужно показать черновики в камеру с двух сторон (сложенные веером). На этом проверка условий для начала экзамена будет завершена
Examus
Шаг 6. Завершение экзамена Печать
Изменено: Пт, 18 Сен, 2020 at 2:20 PM
1. Завершение экзамена студентом
Перед тем, как завершить сеанс Examus, убедитесь, что Вы отправили ответы на проверку.
Разные сайты используют разный интерфейс для отправки ответов. Обычно после корректной отправки ответов осуществляется переход на новую страницу с подтверждением того, что попытка закончена, например:
Точные результаты не всегда сразу отображаются, так как могут требовать требовать времени для проверки ваших ответов. Уточняйте этот вопрос у организаторов обучения.
ВНИМАНИЕ! Только после того, как Вы корректно завершили тест в интерфейсе сайта образовательного учреждения, Вы можете закрыть окно Examus (крестик в правом верхнем углу страницы)
2. Завершение экзамена проктором
В случае грубых нарушений правил экзамена проктор может досрочно прервать экзамен. В этом случае Вы увидите соответствующее уведомление:
Несмотря на то, что окно с тестом останется открытым, примите во внимание, что сеанс с прокторингом закончен и дальнейшие попытки пройти тест не будут фиксироваться в системе Examus. Закройте окно Examus и обратитесь к организаторам обучения с просьбой о предоставлении новой попытки прохождения теста.
Как правильно подготовиться
к экзамену с онлайн-прокторингом
За несколько дней до экзамена
Кроме того, на компьютере нужна исправная камера с разрешением 640х480 и выше, а также микрофон. Необходимо стабильное интернет-соединение со скоростью передачи данных от пользователя не менее 1 Мбит/с.
2. Подготовить рабочее место
Во время экзамена в комнате запрещено находиться посторонним людям – ИИ мгновенно фиксирует присутствие третьих лиц. По той же причине рекомендуется убирать со стен картины с лицами – киберпроктор может автоматически принять портрет Менделеева за подсказчика.
Чтобы киберпроктор работал без ошибок и не фиксировал ложные нарушения, ему необходимо хорошее освещение рабочего пространства. Лампы нужно располагать так, чтобы они не находились прямо за спиной экзаменуемого и не “слепили” систему компьютерного зрения.
Перед стартом экзамена
1. Еще раз все проверить
Лучшая стратегия – перестраховка. Еще раз проверьте исправность работы компьютера. Если с вами в помещении живут другие люди, пользующиеся общим Wi-Fi, постарайтесь минимизировать их влияние на скорость соединения на время проведения экзамена. Заранее подготовьте документы, необходимые для идентификации, и расчистите рабочее пространство от того, что может вызвать подозрения у проктора – конспекты, смартфоны, планшеты и другие дополнительные устройства. Если вам нужен стакан воды или лекарства, лучше всего сходить за ними заранее, чтобы не прерываться во время тестирования. Рекомендуем еще раз внимательно перечитать правила проведения экзамена.
2. Подготовиться психологически
Помните, что все нестандартные ситуации (на которые пользователь не может повлиять) рассматриваются с точки зрения здравого смысла и рационального подхода. К примеру, если у студента упала ручка, и он наклонился ее поднять, на стол запрыгнула кошка, внезапно заплакал ребенок в соседней комнате или позвонили в дверь, ни один проктор не пометит это как нарушение. Однако нужно учитывать, что если вы сдаете экзамен в крупной учебной аудитории или в офисе, где нет возможности избежать присутствия других людей и посторонних шумов, все действия и звуки будут детально анализироваться.
Помните, что у прокторов нет цели вас “завалить”. Если вы отлично знаете предмет, по которому вас экзаменуют, то в любом случае пройдете тестирование как с прокторингом, так и без него.
3. Не беспокоиться о безопасности данных
Конфиденциальность данных – острый вопрос, которым часто озабочены пользователи систем онлайн-прокторинга. Демонстрацию страниц в паспорте и интерьера комнаты многие воспринимают как некое вторжение в частную жизнь. Куда и как попадают эти данные? Кто имеет к ним доступ? Как долго они хранятся? Мы на 100% открыты и готовы к диалогу. Ответы на самые популярные вопросы о безопасности данных можно получить в этом материале.
4. Убедиться, что вы знаете, как связаться с техподдержкой
При синхронном типе прокторинга проктор проверяет картинку в режиме реального времени. В этом случае ему можно задавать вопросы в специальном чате. К примеру, если у вас возникли технические проблемы, вы спокойно можете обсудить это с ним.
Кроме того, при любом формате экзамена техподдержка всегда работает по каналам связи в WhatsApp и Telegram. В специальных чатах можно связаться со специалистами “Экзамуса”, которые оперативно ответят на все вопросы.
Соблюдайте эти простые правила, и экзамен с прокторингом не станет для вас сложной задачей. Желаем успехов!