Zen Tests — наш власний продукт для HR і освіти. Автор описує тему, диктує її чи завантажує файл. Zen Tests складає чернетку тесту, квізу чи анкети з питаннями, варіантами відповідей і шкалою оцінювання. AI оцінює відповіді й пише відгук кожному кандидату. Бал, від якого залежить робота чи сертифікат, має витримати перевірку, тому кожна відповідь зберігає, як її оцінили: за ключем, за допомогою AI з поясненням чи вручну. Кандидат може оскаржити бал, і автор тесту його переглядає. Кредити за роботу AI списуються до її початку, а витрати обліковуються для кожного тесту і користувача
Коли бал впливає на чиюсь роботу чи сертифікат, він має показувати, як його отримано. А кандидат мусить мати змогу його оскаржити
Zen Tests створено для тих, хто складає тести і перевіряє їх: HR-команд, які оцінюють кандидатів; викладачів і навчальних центрів, які тестують студентів; коучів. Без нього автор вручну пише питання, варіанти відповідей і шкалу оцінювання. Потім сам читає кожну відповідь і пише висновки.
Найшвидший вихід: вставити відповіді в AI-чат. Це економить час. Але на наступні питання чат не відповість. Куди пішли відповіді кандидата? Яка модель поставила цей бал і чому? Що показати кандидату, який із ним не згоден? Хто погодився на яку версію політики конфіденційності? Ці питання ставить відповідальний за захист даних. Коли від бала залежить робота чи сертифікат, їх може поставити і кандидат.
Zen Tests розробили так, щоб відповідь на кожне з цих питань зберігалася разом із результатом. Журнал згод, запис того, як оцінено кожну відповідь, і процес оскарження з’явилися в перші місяці, раніше за функції, які на них спираються.
Автор описує тему, аудиторію і кількість питань. Замість опису можна завантажити файл PDF, Word чи Excel, а можна надиктувати. Чотири AI-асистенти працюють по черзі: бриф, потім питання і варіанти відповідей, потім шкала оцінювання, потім публікація. Кожен крок автор може виправити вручну чи попросити AI переробити. Майже однакові питання прибираються автоматично. Розмова зберігається в тесті, тож автор може зупинитися і повернутися пізніше. Кожен крок ґенерації записується, тож коли тест виходить невдалим, видно, на якому кроці стався збій.
Кандидат відкриває посилання чи запрошення поштою. Відповідає з клавіатури чи голосом, із таймером, якщо він є в тесті. Після здачі отримує бал, оцінку, розбивку за розділами, письмовий відгук, PDF і лист. Кандидат може поставити уточнювальні питання про результат і оскаржити його.
Відповіді з варіантами звіряються з ключем. Текстові відповіді оцінює AI, якщо автор це ввімкнув, а інакше — людина. Оцінити вручну можна завжди. Кожна відповідь зберігає, який із трьох способів застосовано, а якщо оцінював AI, то і його пояснення. Разом із кожною здачею зберігається тест у тому вигляді, яким він був того дня, тож пізніша правка не змінює старий результат.
Окрема невелика модель перевіряє кожну текстову відповідь, перш ніж її оцінить AI. Відповідь, яка замість відповіді намагається вплинути на оцінювача, система зараховує неправильною і пояснює причину. Це робить модель, а не список заборонених фраз, тож перевірка працює трьома мовами і розпізнає перефразовану інструкцію.
Кандидат, який не згоден, оскаржує бал. Автор тесту розглядає оскарження, залишає бал чи змінює його, а рішення записується і надходить кандидату листом. Кожна згода записується в журнал із версією політики і часом. Рядки лише додаються: відкликання згоди додає рядок і нічого не стирає. Користувачі самі експортують дані чи видаляють акаунт і мають 30 днів, щоб скасувати видалення. Коли питання стосується здоров’я чи інших чутливих персональних даних, автор бачить попередження ще тоді, коли його пише. Попередження нічого не блокує.
Кожна дія AI коштує кредитів. Кредити списуються до початку роботи. Витрати обліковуються для кожного тесту і користувача. На кириличний текст модель витрачає приблизно вдвічі більше токенів на символ, тому і кредитів на символ списується вдвічі більше.
Що продукт робить сьогодні. Цифр використання не публікуємо
Дзвінок на 30 хвилин про один процес. Скажемо, де автоматизація доречна, а де ні