Логотип
X
Логин:
Пароль:
 Сохранить логин и пароль
 

Организаторы

   


 


Партнеры

         


Творческая категория

Номер команды: ТБ-08

Автогид

5 место

Всемирное наследие (старшая группа)

- участник всероссийского этапа

Команда: Мегафон
Регион: Нижегородская Область
Город: Нижний Новгород
Название ОУ: МОУ лицей №165 имени 65-летия ГАЗ
Руководитель команды: Ворон Александр Максимович, Колотов Александр Васильевич
Оператор №1: Соколов Максим
Оператор №2: Сомов Иван
Дополнительная информация: Ретин Сергей

Фото робота

Фото робота   Фото робота   Фото робота   Фото робота  

 

Описание:

Санкт-Петербург — важный экономический, научный и культурный центр России, крупный транспортный узел. Исторический центр Санкт-Петербурга и связанные с ним комплексы памятников входят в список объектов Всемирного наследия ЮНЕСКО.
Наш проект – Автогид – был разработан для удовлетворения высокого спроса на качественные, увлекательные и интересные экскурсии по историческому центру Санкт-Петербурга.
Перед разработкой и реализацией мы поставили следующие задачи перед нашим проектом:
- Повышение качества информационного наполнения экскурсий.
- Повышение вовлеченности туристов в экскурсионный маршрут.

Использование современных информационных технологий позволяет:
- достичь высокого уровня безопасности туристов
- защитить памятники от наезда
- предоставить туристам новые услуги, например, запись панорамы интересующего памятника.
- быстро находить памятники (технология компьютерного зрения)
- представлять информацию о памятнике на видео (технология дополненной реальности)
- задавать вопросы об интересующих памятниках и получать ответы на них (технология машинного распознавания речи и технология синтеза речи)

Принцип действия:

В качестве прототипа транспортного средства, которое будет перевозить туристов, используется робот на базе Lego Mindstorms NXT. Навигация роботом осуществляется самим туристом. Активная система безопасности не позволяет туристу наехать на памятники, выехать за пределы дороги или проехать перекресток на красный сигнал светофора. Основным сенсором робота является web камера. Видеопоток с камеры передается на компьютер, где происходит обработка сигнала: поиск памятников, определение сигналов светофоров и границ дороги. Если на видео был обнаружен памятник, тогда его описание и фотографии с помощью технологии дополненной реальности будут добавлены на личное устройство туриста – планшет или смартфон. Также турист сможет создать панораму понравившегося памятника и сохранить ее себе на память.
Если турист хочет узнать о памятнике больше, то он может задать вопрос в устной естественной форме. При этом его речь будет распознана, затем Автогид найдет интересующую информацию из базы данных и сформирует голосовой ответ.

Технические характеристики:

Робот использует следующие компоненты:

Ноутбук
web-камера
наушники и микрофон
блок NXT
2 датчика освещенности
1 датчик ультразвука

Программа написана на языке python с использованием библиотеки компьютерного зрения OpenCV

Файл описания:

Скачать

Файл программы:

Скачать

Видеоролик: