ТОМСК, 9 ноя – РИА Томск. Ученые Томского политехнического университета (ТПУ) разработали систему, которая расшифровывает производственные видеоинструктажи, разделяет реплики участников и анализирует, насколько в материалах раскрыты вопросы безопасности; программа снизила трудоемкость первичного анализа на 67% и уже прошла апробацию у промпартнера, сообщила пресс-служба вуза.
Уточняется, что программа "Интеллектуальная система мультимодальной аналитики" реализуется при поддержке "Приоритета-2030" нацпроекта "Молодежь и дети" и ООО "Газпром трансгаз Томск". Ее задача – расшифровать производственный видеоинструктаж, преобразовав аудио и видео в текст и определив, кому принадлежат реплики, и проанилизировать стенограмму с помощью больших языковых моделей.
"Ранее цифровые системы позволяли подтвердить сам факт проведения инструктажа... Сейчас для каждого типа инструктажа создается библиотека индикаторов, описывающих вопросы, которые должны быть раскрыты... Система показывает, какие конкретные вопросы были рассмотрены во время инструктажа, а какие требуют дополнительного внимания", – цитируется заведующий лабораторией ИИ в промышленности ТПУ Константин Чумаков.
По данным пресс-службы, в ходе испытаний система обработала 1000 записей инструктажей на площадках "Газпром трансгаз Томск". Один час аудио- и видеоматериалов она анализирует примерно за девять минут. Точность извлечения содержательных признаков составила 92%, полнота – 97%, расчетное снижение трудоемкости первичного анализа – 67%.
Проект уже имеет свидетельство госрегистрации программы для электронной вычислительной машины.
"Использование искусственного интеллекта позволяет перейти к практически полному первичному анализу массива инструктажей. Но окончательная оценка качества остается за экспертом – искусственный интеллект только снимает значительную часть рутинной работы и помогает сосредоточиться на потенциально проблемных случаях", – отметил Чумаков.
Добавляется, что система разработана с учетом требований импортозамещения и защиты данных: ее можно развернуть на инфраструктуре предприятия, не передавая записи во внешние облачные сервисы. Результаты анализа пригодятся специалистам по охране труда, руководителям и инженерам для аудита инструктажей. Решение создавали для нефтегазовой отрасли, но его можно адаптировать для других опасных производств.
