Проект VirtualTour 2.0 представляет собой программно-аппаратный комплекс для автономного проведения виртуальных экскурсий на промышленных предприятиях. Комплекс объединяет роботизированную платформу с системой навигации, искусственный интеллект для ответов на вопросы и веб-платформу для удалённого подключения участников. Проект позволяет заводам показывать свои цеха клиентам, инвесторам и студентам без вождения посторонних по территории, без отвлечения персонала и без постоянного присутствия экскурсовода.

Цель проекта

Создание сервиса, который позволит промышленным предприятиям самостоятельно проводить виртуальные экскурсии по своим цехам в режиме реального времени с помощью роботизированного гида. Проект направлен на решение задачи безопасного и интерактивного показа производства для внешних аудиторий. Реализация данного проекта позволит заводам экономить время сотрудников, снизить риски, связанные с допуском посторонних, и повысить привлекательность производства для молодых специалистов.

Описание конечного продукта проекта

Конечный продукт представляет собой комплекс, включающий роботизированную платформу на колёсном ходу или в виде робособаки с камерой, микрофоном и динамиком. Робот оснащён системой навигации на базе LIDAR, может запоминать маршрут по цеху и передвигаться по нему автономно. Вторая часть продукта — веб-платформа, через которую сотрудник предприятия настраивает маршрут, загружает информацию об оборудовании и запускает экскурсию. Участники подключаются к экскурсии по ссылке из любого браузера, видят картинку с камеры робота, могут приближать детали и задавать вопросы. Искусственный интеллект отвечает на вопросы участников, используя загруженную базу знаний предприятия. Экскурсия автоматически записывается и превращается в готовый виртуальный тур для повторного просмотра.

Функциональные возможности продукта

Сотрудник предприятия может вручную провести робота по цеху, чтобы тот запомнил маршрут. В веб-интерфейсе можно отметить точки остановок и загрузить текст для озвучивания или аудиофайлы. Можно выбрать сценарий экскурсии под разную аудиторию: школьники, студенты или инвесторы. При запуске экскурсии робот самостоятельно движется по маршруту, останавливается в нужных местах и рассказывает об оборудовании. Участники подключаются по ссылке без установки программ, видят видео с камеры робота, могут приближать изображение, чтобы рассмотреть детали. В чате участники пишут вопросы, а искусственный интеллект отвечает на них голосом робота или текстом. После экскурсии система сохраняет запись с субтитрами и оглавлением по ключевым моментам.

Целевая аудитория

Основная целевая аудитория — промышленные предприятия России численностью от 250 до 1000 сотрудников. Это предприятия обрабатывающих производств, машиностроения, металлургии, химической и пищевой промышленности, а также строительные компании. Дополнительный сегмент — технологические парки, индустриальные музеи и центры развития туризма, которые могут использовать комплекс для проведения экскурсий для посетителей.

Описание технологического ядра проекта

Для навигации и передвижения используется LIDAR-датчик и алгоритмы одновременной локализации и построения карты, известные как SLAM.

Для видеотрансляции и взаимодействия с участниками используется протокол WebRTC, который обеспечивает передачу видео в реальном времени с минимальными задержками и работает в любом браузере без установки дополнительных программ. На роботе установлена PTZ-камера.

Искусственный интеллект построен на базе больших языковых моделей, таких как YandexGPT или GigaChat. При наведении камеры на оборудование модуль компьютерного зрения распознаёт станок и подсказывает системе, какой объект описывать.

Архитектура решения включает три основных модуля. Первый — роботизированная платформа с установленным программным обеспечением для навигации, управления камерой и передачи данных. Второй — облачный сервер, на котором работают искусственный интеллект, база знаний, веб-сервер для админ-панели и плеера, а также хранилище записей экскурсий. Третий — веб-интерфейсы: админ-панель для сотрудника предприятия и плеер для участников экскурсии.

Уникальность проекта

Аналоги роботов-экскурсоводов на российском рынке есть. В Москве и других крупных городах такие решения используются в музеях, технопарках и на отдельных предприятиях. Однако большинство существующих реализаций имеют ключевые ограничения.

Многие существующие роботы-экскурсоводы управляются дистанционно оператором. Наш подход отличается тем, что робот работает полностью автономно. Искусственный интеллект сам отвечает на вопросы участников, используя загруженную базу знаний предприятия.

Существующие решения ориентированы в первую очередь на музеи и выставочные пространства, а не на промышленные цеха. Условия на заводе другие: шум, сложная навигация, необходимость рассказывать про технически сложное оборудование. Наш комплекс адаптирован именно для промышленности: он использует LIDAR для навигации в динамической среде, интегрируется с технической документацией предприятия, умеет распознавать станки через компьютерное зрение.

Мы предлагаем не просто робота, а полноценную платформу. Экскурсия в реальном времени автоматически записывается и превращается в готовый виртуальный тур. Предприятие получает не только живую экскурсию, но и учебный материал для будущих сотрудников.

Большинство существующих решений продают робота как дорогое железо. Мы же предлагаем робота как услугу. Предприятие платит за экскурсию или за месячную аренду, а не покупает оборудование за миллион рублей. Это делает комплекс доступным для малых и средних заводов.

MVP

Демо-сайт - https://cmd13.aksel26.site/

Демо-видео - https://disk.yandex.ru/i/rEkvyzoqbfBE3A

На страницу проекта