Как сохранить репутацию в условиях максимальной бесчеловечности
О сертификации и заказчиках
СОВНЕТ — это национальная ассоциация управления проектами — единственный в России представитель Международной ассоциации управления проектами IPMA. Одно из важнейших направлений деятельности — сертификация специалистов по стандарту IPMA.
Сертификация нужна, чтобы подтвердить компетенции в проектном управлении и получить международное признание профессионализма. Заказчиками выступают как сами специалисты, так и компании.
В России за сертификацией обращаются в основном корпоративные клиенты, чтобы:
- повысить свой престиж и уровень доверия со стороны партнёров
- работать на международном рынке;
- получать преимущество при участии в конкурсах, в которых одним из условий является выстроенная система управления проектами и наличие соответствующих специалистов: подтвердить это можно только признаваемым международным сертификатом.
Среди клиентов СОВНЕТ такие организации как Росатом, Сбербанк, другие крупные компании. В среднем ассоциация сертифицирует в год около 500 профессионалов.
Как проходит сертификация?
Процедура отличается в зависимости от уровня претендента.
Более опытным руководителям проектов, претендующим на высокие уровни, необходимо подготовить отчёт о своём опыте и деятельности и пройти интервью, в ходе которого происходит обсуждение отчёта и опыта кандидата.
Но для всех кандидатов, независимо от уровня, испытания начинаются с прохождения теоретического теста.
Почему так важна честность? Репутационные риски
Ассоциация всегда выдвигала требование: сертификация должна проходить под наблюдением, чтобы исключить случаи обмана при тестировании.
Если сертификат получит человек, который не соответствует требованиям, репутационные риски возникают с двух сторон:
- Со стороны компании-заказчика, которая заявляет, что её проектные менеджеры — профессионалы, сертифицированные специалисты. Если такие сотрудники допускают ошибки и проявляют низкую квалификацию, это накладывает отпечаток на репутацию компании.
- Со стороны СОВНЕТ: сейчас организация признана как носитель методологии, знаний, навыков в проектном менеджменте и качественного, справедливого сервиса. Важно, чтобы обладатели сертификатов соответствовали этой репутации.
Если сертифицируется человек, который не соответствует уровню, это подрывает доверие к самой сертификации, к тому, что этот документ вообще что-то значит.Поэтому, в условиях, когда и так не очень-то доверяют разным бумагам, а акцент всё больше делается на портфолио и практике, этот риск является существенным для ассоциации
Эволюция цифровизации
Ручка и тетрадка
Раньше кандидаты на получение сертификата приезжали в классы и сдавали тест с помощью тетради и ручки. Результаты приходилось обрабатывать вручную, разбирая почерк, порой близкий к врачебному.
Это было:
- долго;
- дорого;
- некомфортно для тестируемых;
- занимало много рабочего времени и сил у проверяющих.
Региональные классы и цифровизация
Члены Правления в России задумывались о том, чтобы перевести сертификацию в дистанционный формат для того чтобы:
- кандидатам не нужно было приезжать в Москву;
- охватить отдалённые регионы;
- сократить издержки на организацию процесса.
Впервые провести сертификацию в дистанционном формате удалось в 2014 году. Российский СОВНЕТ стал первой национальной ассоциацией в составе IPMA, кто это сделал. Хотя интернациональная организация охватывает более 50 стран, в том числе — всю Европу, Китай, США и Австралию.
Тогда у IPMA не было нормативных документов, подтверждающих, что процедуру можно проводить дистанционно, поэтому приходилось доказывать легитимность и идти на компромиссы.
«Мы тогда не смогли это сделать полностью онлайн, а делали на базе региональных классов, где было всё-таки физическое присутствие, но все процедуры проходили в цифровом виде»
Так как тестирование проходило в классах, где присутствовали наблюдатели, вопрос контроля ещё не стоял так остро. Пока не наступил 2020 год.
Пандемия и прокторинг
С наступлением пандемии COVID19 оказалось, что сертификационная деятельность Ассоциации IPMA во всех странах в прежнем очном формате невозможна: люди не могли выйти из дома. А у СОВНЕТ на тот момент процесс уже был цифровизован. Вопрос стоял только в том, как контролировать честность, когда люди сдают тесты онлайн.
Риски для деятельности IPMA были столь высоки, что руководство мировой ассоциации было вынуждено не только срочно искать онлайн решение, но даже пошло на временную отмену ограничений на использование внешних источников информации во время теста, так как не обладало возможностью контроля сдачи теста онлайн.
Российской ассоциации это не подходило, поскольку психология нашего человека отличается от западной:
«У нас наколоть систему — это спорт. Не в том смысле что «я ничего не знаю, а мне надо как-то сдать». А вот найти лазейку: «Даже если я всё знаю, поискать, как бы их поинтересней, покрасивей обмануть»
Ещё до онлайн формата попытки списать на сертификации мало чем отличались от школьных и университетских экзаменов: «базы знаний» в туалетах, шпаргалки, смартфоны, чаты с правильными ответами и т.п.
Поэтому Правление СОВНЕТ приняли решение подключить прокторинг, систему контроля онлайн-экзаменов.
«Когда классы исчезли, у нас вся цифровая часть была готова, кроме прокторинга. Тогда мы обратились в компанию Экзамус. Анализировали рынок: на тот момент было 2 живых решения. Нам показалось, что в Экзамус развитие сервиса обладает бОльшими перспективами»
Опыт использования сервиса
Автоматический режим
СОВНЕТ используют автоматический режим прокторинга. Это значит, что все нарушения во время тестирований фиксирует исключительно искусственный интеллект, киберпроктор, без участия человека.
- Система проводит идентификацию сдающего
- Ведёт наблюдение и запись с веб-камеры и рабочего стола
- Автоматически фиксирует нарушения
- Составляет отчёт о степени честности при сдаче
- Предоставляет видеозапись, где отмечены все возможные нарушения
Киберпроктор Экзамус фиксирует:
- отсутствие сдающего в кадре;
- подмену тестируемого;
- посторонние лица и голоса в кадре;
- увод взгляда от экрана (на шпаргалку или смартфон);
- смену активного окна на рабочем столе (попытка загуглить ответ или воспользоваться материалами на другой вкладке).
Максимальная «бесчеловечность»
У сервиса есть режимы с дополнительным участием проктора-человека:
- синхронный: когда протор наблюдает за сдающим в онлайн-режиме;
- и асинхронный: проктор пересматривает видео с теста и валидирует оценку киберпроктора.
Но Артём Рудольфович Чапцов, который отвечает в СОВНЕТ за цифровизацию, придерживается принципа «максимальной бесчеловечности», — так он сам его называет.
«Звучит заманчиво, но идея проста: максимально автоматизировать процессы и минимизировать участие человека в рутинных операциях. Человеческое время и труд стоят дорого»
Психологический фактор
Когда киберпроктор выставляет отрицательный статус (фиксирует, что человек списывал), менеджеры Сертификационного центра СОВНЕТ пересматривают фрагменты нарушений, чтобы опровергнуть или подтвердить результаты прокторинга.
Если при просмотре видео возникают подозрения, что человек сдавал нечестно, его вызывают на собеседование по вопросам теста. Как правило, туда сдающий приходит уже подготовленным.
«Прокторинг — это не только система контроля, но и психологический фактор: в большинстве случаев люди даже не пытаются списать, зная, что это практически невозможно, что за ними следят, и что могут наступить неприятные последствия»
Санкции к нарушителям?
В СОВНЕТ нам рассказали, что случаев, когда кого-то «завернули» из-за прокторинга на первом этапе не было. Потому что в случае сомнений людей приглашали на собеседование, где асессоры, принимающие испытания оценивали, что реально знает человек, и как интерпретировать его поведение во время теста.
Для многих кандидатов тестирование — это лишь первый этап сертификации, который является входным фильтром перед интервью, по итогам которого выносится окончательное решение о сертификации. И показатель прокторинга может повлиять на отношение асессора к кандидату.
Результаты
Использование прокторинга помогло СОВНЕТ:
- продолжить сертификацию в условиях пандемии;
- перейти к дистанционной форме тестирования;
- сохранить достоверность результатов и репутацию сертификатов;
- получить положительный опыт в цифровизации и сохранить дистанционную форму после пандемии.
«Мне нравится сервис, который мы используем. Я считаю, что ставку мы на него в своё время сделали совсем не зря. Поэтому он интегрирован и продолжает работать»
Как сделать online-экзамены максимально достоверными?
Мы каждый день контролируем честность тестирований в онлайн. Знаем всё о самых распространённых и изобретательных способах списывания и читерства.
Прокторы (проверяющие) Экзамус выпустили гайд, в котором рассказали, как сохранять честность онлайн-испытаний:
- как подготовиться к экзамену;
- популярные нарушения и способы борьбы с ними;
- практические советы для тех, кто принимает экзамен.
Скачивайте и применяйте: достоверных вам результатов и эффективного обучения!
Остались вопросы? Оставляйте заявку на демо: проведём экспресс-аудит вашего обучения и тестирования, подробно расскажем и покажем, как работает прокторинг