Описание проекта
Проект "Звуковые Дорожки" (далее - ЗД) представляет собой программно-аппаратный комплекс, предназначенный для повышений уровня комфорта людей, нуждающихся в помощи при ориентации в пространстве. В основе решения лежит способность человека ориентироваться в пространстве по звукам и с помощью голосовых подсказок.
Если можно так выразиться - проект ЗД это совокупность мероприятий по созданию и развитию аудиокарт.
Аппаратная часть на современном этапе представляет собой удерживающее устройство для крепления смартфона на голове (аналогично VR-очкам). В устройство вставляется смартфон камерой наружу и подсоединяются наушники.
Программная часть состоит из нескольких блоков, в том числе:
- приложение, установленное на смартфоне;
- нейронная сеть;
- карты (Яндекс, Google).
Для пользователя ЗД процесс можно описать следующим образом. Человек голосовой командой активирует соответствующее приложение на смартфоне. Приложение сообщает об уровне заряда батареи и времени использования, затем предлагает выбрать режим: маршрут (в этом называется адрес, место прибытия, а пользователю сообщается о времени в пути и начинается голосовое ведение по маршруту) или прогулка и включаются аудиокомментарии.
Аудиокомментарии представляют собой автоматические голосовые сообщения, которые описывают всё, что фиксирует камера смартфона.
На практике названия вывесок читаются, определяются номера маршрутов общественного транспорта, таблички с QR-кодами, распознаются препятствия, различные объекты, предметы движущиеся и статичные, животные и лужи. Читаются ценники, таблички и прочая текстовая информация, в том числе на иностранных языках. Сообщается, какое расстояние до тех или иных объектов, с какой стороны их лучше обойти и даются прочие советы. Отслеживается уровень заряда батареи и при снижении, например, до 50% предлагается начать поиск источника питания.
Обучение нейронной сети может проводиться, в том числе, с помощью добровольцев, которые проходят предполагаемые маршруты и подробно описывают "виды" (изображения, которые фиксирует камера смартфона). Таким образом, в результате достаточно большого количества информации сформируется необходимая база данных, которая позволит людям более свободно ориентироваться в городских пространствах, внутри помещений, в магазинах и прочих местах.
Особенно полезен продукт для людей с нарушениями зрения, топографической дезориентацией, после инсультов и так далее, а также может быть востребован здоровыми людьми для ориентации в незнакомой местности, для обучения детей и взрослых, как путеводитель по музеям и общественным зданиям и так далее.
Для реализации проекта необходимы, прежде всего, (на 1 этапе - разработки) специалисты по нейронным сетям, а затем (на 2 этапе - обучения и использования) - большое количество добровольцев.
Сроки реализации проекта могут быть сколь угодно долгими, так как 2 этап практически бесконечен: по сути, создаётся звуковая карта мира (в том числе и помещений), и так как мир постоянно меняется, то эти изменения необходимо комментировать.
Финансирование проекта возможно из источников как внебюджетных, так и бюджетных в рамках реализации соответствующей программы сферы здравоохранения. Проект обладает в перспективе огромной коммерческой привлекательностью. Этот момент описывается отдельно в разрабатываемой концепции.
Приглашаем заинтересованных лиц к участию в реализации проекта.
