На кону миллиарды и образование в России: казанские разработчики создали альтернативу ЕГЭ

Денис Тарасов: «Мы разработали программу, которая автоматически создает под каждого человека специальное задание по заданной теме» Фото предоставлено компанией «Меанотек»

«ЧЕЛОВЕК СОРЕВНУЕТСЯ С ИСКУССТВЕННЫМ ИНТЕЛЛЕКТОМ»

— Денис, расскажите подробнее о программе DeepExam и как пришла идея создать такой продукт?

— Я долгое время работал в университете, академии наук и прекрасно знаю, что есть сложность контроля знаний в виде тестирования. Причем такая проблема существует и у большинства работодателей при отборе соискателей. Поскольку мы долгие годы разрабатываем различные проекты с применением искусственного интеллекта (ИИ), пришла идея доработать один из продуктов под умное тестирование. Так на свет в конце 2019 года появилась программа DeepExam.

— В чем преимущества программы перед классическим тестом?

— Экзамен в виде традиционного тестирования не мотивирует людей учиться и глубоко понимать предмет, ведь можно заранее найти и заучить ответы. Мы разработали программу, которая автоматически создает под каждого человека специальное задание по заданной теме. В отличие от обычного теста, в DeepExam испытуемому предъявляется два фрагмента текста по теме, один из которых написан искусственным интеллектом, а второй взят из реального источника. Таким образом, человек соревнуется с ИИ в своих способностях. Чтобы найти верный ответ, нужно не просто внимательно прочитать задание, но и произвести логические рассуждения. Каждый тест уникален, а это значит, что нашу программу нельзя обмануть —  ответов нет в интернете и списать невозможно.

Я приведу небольшой пример из нашей практики: прежде чем запустить DeepExam в массы, мы тестировали программу в разных направлениях. Одно из исследований проводили совместно с сетью ресторанов города. Суть его заключалось в том, чтобы определить уровень знаний сотрудников этой сети в области гигиены и обращения с продуктами. Задание проходили как новички, так и опытные сотрудники с опытом пяти и более лет. Сначала все они сдали свой внутренний тест с множественным выбором. По итогу у всех оказались отличные результаты.

Потом все те же сотрудники прошли наш тест. Что мы увидели? Те, кто давно работает в сфере общепита, подтвердили свои знания и получили неплохой балл. А те, кто заступил на работу менее года назад, получили настолько низкий балл, что аналогичный результат показали бы те люди, которые никогда и не работали в сфере общепита.

— Как вы считаете, почему так произошло?

— Когда стали разбираться, выяснилось, что их внутренний тест годами не менялся. И люди его проходят ровно до тех пор, пока не пройдут. Получается, что они просто заучили верные ответы, но сути так и не поняли. Все это время руководство было спокойно, наблюдая позитивную динамику по тестам, но по факту некоторые сотрудники даже не понимали элементарных вещей. Представляете, к каким последствиям это могло бы привести?

— А как насчет того, чтобы контролировать знания при помощи нанятого специалиста?

— У этого решения тоже есть несколько уязвимых мест: первое — не всегда можно привлечь по-настоящему грамотных специалистов. Второе — оценка экзаменатора нередко может быть субъективной, срабатывает человеческий фактор: если педагог — мужчина, то молодая красивая девушка, скорее всего, пройдет любой тест. Третье и, возможно, главное — как только специалист-экзаменатор покидает предприятие, сразу же снижается качество контроля, а это значит, что, пережив испытательный период, сотрудники вернутся к прежней жизни.

— Отсутствие должных знаний сильно бьет по карману работодателя?

— На эту тему проведено немало исследований. Различные расчеты показывают, что повышение успеваемости учащихся в странах – членах организации экономического сотрудничества и развития (ОЭСР) до уровней, существующих в странах с наиболее сильными школами, может привести к экономическому росту в 260 триллионов долларов США!

«DeepExam позволит избежать применения драконовских мер по контролю над проведением ЕГЭ, от которых страдают все школьники» Фото: «БИЗНЕС Online»

«НАША МЕЧТА — ИСПОЛЬЗОВАТЬ DEEP EXAM В ЕГЭ»

— В каких областях можно применить DeepExam?

— Везде, где есть база в виде документов и текстов. Как работает наша система: она читает исходный материал, например книгу или инструкцию, и на основании содержания сама генерирует нужное количество тестов. И для DeepExam нет никакой разницы, в какой области проверять знания: правила дорожного движения, биология, русский язык, точные науки или повышение квалификации — достаточно предоставить нужный материал для чтения системе.

Получается, что DeepExam постоянно занимается саморазвитием, изучая все больше и больше данных. Программа так устроена, что способна «переваривать» любой объем информации по выбранному направлению и сгенерировать из него нужное количество тестов. Мы делали пилотный проект для курсов повышения квалификации по медицине — для этого загрузили в систему научные статьи на английском. Этой информации еще не было в учебниках на русском языке, а наша программа уже ей владеет и на ее основе создает задания.

— Есть ли какие-то области, которые в первую очередь интересны вам?

— Наша мечта — использование DeepExam в ЕГЭ. Представляете, как внедрение такого продукта могло бы изменить подход к обучению? К сожалению, вокруг ЕГЭ каждый год наблюдается некая неразбериха и даже существует черный рынок, который оценивается экспертами в миллиарды рублей. И, пожалуй, многие больше думают о том, как бы достать ответы, а не о том, чтобы выучить предметы. Такой подход не предвещает ничего хорошего.

Также DeepExam позволит избежать применения драконовских мер по контролю над проведением ЕГЭ, от которых страдают все школьники. При внедрении DeepExam школьникам можно будет взять с собой на экзамен все: любые шпаргалки, учебники и даже можно разрешить искать ответы в интернете. Это не даст им никакого преимущества.

Наконец, пересдавать ЕГЭ можно будет неограниченное количество раз, ведь новые задания создаются автоматически в любых нужных количествах.

Особенно важно то, что наша система позволяет эффективно проводить проверку знаний в дистанционном формате. Сейчас, когда все вынужденно перешли на «удаленку», это особенно актуально.

— Сколько нужно времени, чтобы адаптировать DeepExam под новую задачу — тест на определенную тематику?

— Все зависит от конкретно взятой задачи, но в среднем это около недели-двух. Причем речь идет в большей степени о том, чтобы подкорректировать в системе определенные штрихи под нужды заказчика.

— Вы оформили на DeepExam два патента. Гарантирует ли это, что у программы не появится аналогов?

— Подобных гарантий никто никогда дать не может. Мы постарались учесть в патентах все возможности искусственного интеллекта на сегодняшний день. Это позволяет нам рассчитывать на то, что аналогичный продукт вряд ли появится раньше, чем через 5–6 лет, когда искусственный интеллект приблизится к человеческому и методы работы изменятся.

— У вас много различных разработок на основе ИИ? Кто ваши заказчики?

— Разработок много, и с частью из них можно ознакомиться на нашем сайте. Наши заказчики — в основном зарубежные компании, в том числе из стран СНГ. Работаем в разных сферах, недавно выполняли заказ для крупного банка из топ-20 Казахстана.

— Есть информация, что в разработке одного из продуктоввы опередили специалистов из «Фейсбука». Это правда?

— Помимо разрабатываемых сервисов на основе искусственного интеллекта и участия в различных международных конференциях, мы еще пишем научные статьи на передовые темы. В них представляем методы работы программ и в 2015 году опубликовали в одном из научных журналов работу, где описывался метод формирования краткого содержимого текста с помощью нейронной сети. Коллеги из «Фейсбука» не только опубликовали подобный материал позже, но и их версия могла работать только с одним документом, а наша — с несколькими. Поэтому да, мы сделали это раньше них. Но ввиду того, что в 2015 году о нас никто не знал, нашу статью мало кто изучил, зато их материал быстро попал в информационное поле. Но расстраиваться нам было некогда — поступил очередной заказ от зарубежного партнера.