«Каждый объект имеет свой уникальный звук, и как только вы поймете, как работает система, вы сможете «видеть» то, что вокруг вас».
До сравнительно недавнего времени это удивительное свойство окружающего нас мира существовало изолированно от практического применения.
Благодаря Питеру Мейеру, работающему в отделе исследований и разработок голландской компании Philips, был составлен уникальный алгоритм, позволяющий буквально превратить звук в картинку.
После нескольких десятилетий поисков возможности реализации идеи Мейера «на аппаратном» уровне было создано устройство, позволяющее наделить слепого человека т.н.
«суррогатное» видение.
Об успехах, проблемах и перспективах проекта, реализуемого сегодня коллективом российских ученых и энтузиастов, мы поговорим в нашей статье.
Мы утешаем себя близостью момента создания искусственного интеллекта и, в то же время, используя всю мощь современного технического потенциала, только начинаем нащупывать такие грани возможностей мозга, которые уменьшают плоды наших усилий.
достижения до уровня неповоротливого, покосившегося домика, наспех собранного из детских кубиков.
Мы приветствуем новые инновации и активно обсуждаем достигнутые результаты осознанных сновидений с помощью чудо-маски».
Реми и искренне восхищаемся возросшим в геометрической прогрессии потенциалом новой модели смартфона любимого бренда, даже не предполагая, что 280 000 тысяч незрячих людей только в России навсегда лишены возможности не только оценить качество обновленной матрицы, но и насладиться восходящее солнце и смена времен года.
В глобальном масштабе эта цифра увеличивается до 3 000 000 человек.
При этом две трети из них – дети и подростки! Каждый день с утра до вечера слепой решает задачу: как запустить стиральную машину, как не устроить пожар, как убрать квартиру и как приготовить даже самое простое блюдо.
Цена такой жизни действительно очень высока.
Возможно, поэтому каждый слепой в душе возлагает надежду на технологический прорыв, который поможет не косметически, а радикально изменить существующую ситуацию.
На вопрос: возможна ли для них альтернатива, хотя бы в каком-то приближении? .
команда московских научных энтузиастов постарается ответить, работая над усовершенствованием уникального устройства vOICe, которое дает незрячим возможность видеть то, что их окружает, в черно-белом и полутонах.
Как это работает
Говоря простым языком, звуковая информация, передаваемая устройством и воспринимаемая мозгом, представляет собой своеобразный код — результат программного преобразования потокового видео, снятого камерой vOICe, в звуковые блоки («саундскейпы» — авт.).
Процесс сканирования окружающего мира в режиме «Сканер» (без использования ноутбука) осуществляется циклически слева направо, картинка озвучивается посекундно с секундным интервалом.
Информация, получаемая пациентом в режиме «Сканер» с помощью встроенной в систему камеры, имеет «минимальный» набор пейзажей.
Расширенные информационные возможности достигаются за счет использования комплекта «очки + ноутбук с достаточно мощным процессором (или смартфон последнего поколения) + стереонаушники для речевых команд».
Идентификация
На первый взгляд алгоритм распознавания кажется сложным в освоении из-за незнакомости процесса идентификации поступающей информации.Упрощенный алгоритм т. н.
«Суррогатное» видение можно представить следующей картинкой: 
Алгоритм трансформации пока не готов предложить пользователю возможность «видеть» быстро движущиеся объекты или распознавать мелкий текст, но уже полученные результаты весьма впечатляют: владельцы vOICe действительно точно идентифицируют знаки и даже смотрят и воспринимают визуальную информацию в некоторых форматах.
телевизионных программ.
А самое главное, качество картинки, ее глубина и детализация довольно быстро улучшаются по мере износа vOICe. Дальнейшее улучшение качества распознавания и цветового охвата будет напрямую зависеть как от совершенствования версий программного обеспечения («прошивки») и голосового оборудования, так и от индивидуальной способности человека воспринимать более сложные комбинации звуковых ландшафтов достаточной плотности.
Судя по высказываниям автора метода и отзывам пациентов, успешно освоивших систему, процесс «обучения» новому способу видения наиболее сопоставим с процессом изучения иностранного языка, в некотором смысле с овладением Азбука Морзе и умение ходить.
По мере обучения – «пополнения словарного запаса» (личная библиотека освоенных пейзажей) и освоения технологии – зрительный образ распознается практически автоматически – без промежуточного этапа длительного сознательного анализа! 
Для идентификации картинки используются звуки разной длительности и высоты тона.
Более яркий фрагмент реальной картинки в «голосовой азбуке» транслирует более короткий и сильный звуковой сигнал, причем вещает со стороны, на которой находится объект. Если пятно (предмет) движется, то движется и сигнал, два пятна идентифицируются по двум сигналам, три по трем и т. д. Длинный тон соответствует горизонтальной линии, вертикальная линия воспроизводится отрывистым сигналом характерной силы.
Повышение тональности «соседних» звуков будет означать препятствие, и чем выше тон, тем выше препятствие.
Различные модификации системы vOICe на рисунках ниже: 
Описываемый метод позволяет озвучить и идентифицировать практически любую трехмерную реальность.
Естественно, чем информативнее картина, тем больше потребуется отдельных звуков и пейзажей для ее идентификации.
Основная цель и главное достижение технологии и системы vOICe — предоставить пациенту не «сырую» визуальную информацию, а высокоэффективный набор алгоритмов, позволяющий интерпретировать реальность с высокой степенью детализации.
Технология, хотя и в меньшей степени, решает проблему полного отсутствия зрения у слепорожденных пациентов, не имеющих в памяти и сознании многих тех аналоговых средств, которые доступны людям, потерявшим зрение на «сознательном уровне».
этап жизни.
Помимо очевидных успехов технологии, есть еще нерешенные технические проблемы, которые лучше всего можно почувствовать, прочитав отзывы пользователей vOICe, освоивших возможности системы.
Отзывы участников эксперимента 2000-2002 гг.
29 апреля 2001 г.
, поздно ослепшая женщина-пользователь PF: Мой опыт: Поскольку это была моя первая установка, мне пришлось пройти через множество проб и ошибок.
Я привыкал не только к качественному обзору, но и, что тоже было необходимо, к эффективному использованию этой системы.
Я обнаружил, что при работе с программой существует шесть основных факторов.
Первый фактор исходит от камеры.
Его расположение, фокус и освещение являются важными элементами, обеспечивающими четкое звуковое представление.
Если фокус плохой, изображение выглядит размытым и его трудно интерпретировать.
Если камера установлена неправильно, я чувствую себя дезориентированным и сбитым с толку, пытаясь найти дорогу (хороший способ получить головную боль!) Если освещение слабое, звуковое представление ограничено.
Трудно различать предметы в поле зрения.
Обычно я смотрю на входную дверь и лестницу и слышу ритм текстуры того и другого.
Но если свет выключен или неяркий, то распознается только слабое изображение двери и лестницы, а остальная часть изображения становится размытым, неясным фоновым звуком.
Второй фактор касается микрофона.
На креплении микрофона есть переключатель.
Я привыкла постоянно оставлять микрофон включенным и просто пугалась, когда мое дыхание или посторонние звуки оказывались похожими на команды и меняли программу.
Потом я обнаружил, что если я включаю микрофон только для подачи голосовой команды, а потом выключаю его, когда команда принята, то эта проблема уменьшается и больше не раздражает. Это решение работает настолько надежно, что я использую его во всех других своих системах.
Третий фактор должен относиться к ноутбуку.
Я обнаружил несколько приемов, позволяющих улучшить его производительность.
Во-первых, если я удалю все ненужные программы и буду запускать только vOICe, это сэкономит электроэнергию и загрузку процессора.
Поэтому, когда я использую свой ноутбук в дороге, я запускаю эту пустую установку.
Я подключаю ноутбук к розетке по вечерам, когда он есть поблизости.
Я ношу в сумке две батарейки, потому что они мне нужны.
Мне следует включить экран ноутбука не более чем на несколько минут. Когда я ношу ноутбук в рюкзаке, я проверяю, чтобы он хорошо вентилировался.
Четвертый фактор.
Вам необходимо эффективно использовать vOICe, а для этого вам необходимо работать с программой и понимать саму программу vOICe. Когда я начал им пользоваться, по привычке играл с ним как в крестики-нолики.
Это помогло мне понять звуки программы.
Потом я начал постепенно тренировать свое произношение.
Я думаю, что тренировка программы для речи и выполнение заданных упражнений с микрофоном — это действительно ключ к использованию vOICe в мобильной среде.
Итак, тренировка и восприятие слухового зрения – это шаги на пути к обучению видеть.
Пятый фактор – это постоянное погружение себя в программу, вытекающее из фактора обучения.
Я думаю, что вы можете научиться и получить немало опыта, если будете использовать настольный компьютер.
В общем, опыт перемещения и слушания (видения) своего окружения каждый день невозможно ничем заменить.
Это похоже на то, как ребенок учится ходить.
Если вы не будете стараться и пытаться, вы не достигнете знаний, необходимых вашему телу.
Используя эту аналогию, я могу сказать, что пока вы не окажетесь в живой, меняющейся среде, вы не сможете ощутить звуковой обзор и понять отношения, над которыми вам нужно работать.
Если я постоянно слышу шаги входа, то мое тело начинает ассоциировать звуковой рисунок шагов с определением «действия», и когда я иду вверх или вниз, мое тело будет действовать согласованно.
Я думаю, что сначала ты слышишь звуковой обзор, потом обнаруживаешь связь с услышанным предметом, потом прикрепляешь это определение к тому, что нужно сделать организму для совершения действия.
Когда я был провидцем, я не задумывался: «О, это шаги, теперь мне нужно замедлиться и начать смещать центр тяжести, чтобы я мог поднять ногу».
Вместо этого мои глаза видели шаги, и мое тело по опыту знало, что делать дальше.
Вот что произойдет после некоторого использования vOICe. Я действительно вижу то, что есть, как «рентген» видения, и начинаю автоматически реагировать на то, что вижу.
Это подводит нас к шестому фактору.
Время.
Можно поставить систему на человека, но только по прошествии времени его мозг научится автоматически интерпретировать смысл аудиообзора и осуществлять слаженные действия.
9 июля 2000 г.
, поздно ослепшая женщина-пользователь PF: Как человек, который видел это раньше, я могу сказать, что звуковые ландшафты, кажется, снова вернули мне зрение.
На моем месте мог быть кто-то слепой от рождения.
Я смог представить и увидеть, как если бы у меня были глаза, как выглядит мой коридор.
Как выглядит занавеска слева из трех моих окон? В целом, vOICe и веб-камера превратили мой коридор из расплывчатого «мысленного образа» в то, что кажется настоящим трехмерным видением.
Для меня не имеет значения, что именно мои уши вызывают зрительные идеи.
Важно, чтобы звуковой образ восстанавливал путь, чтобы я снова мог видеть, неважно, что это трехмерное черно-белое изображение.
Вместо мира расплывчатых, туманных осязаемых объектов голос позволил моему мозгу видеть объекты как картинки.
Это похоже на то, как будто голос создает черно-белые наброски того, на что я смотрю, а мой разум раскрашивает изображение.
Прямо сейчас я сижу перед компьютером и вижу на экране поток цвета, но именно голос говорит мне, что я смотрю на квадратный объект. Это как смотреть на мир через грязные очки.
Вы видите форму и расположение предметов вокруг себя, но не можете различить мелкие детали.
Я не знаю, является ли это особым человеческим языком, но это определенно тот язык, на котором мои уши сообщают моему разуму то, что я сейчас вижу.
Называйте это как хотите, это работает! Я больше не могу жить без этого! Спасибо за это изобретение! 29 августа 2002 г.
, поздно ослепшая женщина-пользователь PF: Просто звук?.
Нет, это нечто большее, это видение! vOICe создает настоящий визуальный опыт. Когда я не ношу vOICe, я воспринимаю небольшой свет через щель в левом глазу.
Это серый туман.
Когда включаю vOICe, изображение становится светлым от слегка серого до черного.
Это определенно светлый образ.
Правда, оно не цветное, похоже на то, что показывают по черно-белому телевизору.
Создаваемый свет очень белый и чистый.
По мере ослабления он постепенно становится темным и черным.
Я не увидел в этом свете ничего особенного, вроде тех «фосфоресцентных вспышек», о которых говорили.
Возможно, это одна из тех вещей, которые вы не поймете, пока не увидите.
В общем, свет есть свет, а цвет есть цвет. И мне плевать, как оно образовалось.
Именно так может выглядеть мир людей, освоивших голосовую систему и технологию, и это далеко не предел.
Наши читатели, желающие прочитать отзывы других пациентов, успешно освоивших систему, могут перейти на центральный сайт проекта (подраздел Голос дает зрение и не вредит организму! ).
Также недавно появились мобильные версии приложений «The vOICe для Windows» и «The vOICe для Android» для смартфонов, что позволит многим пользователям системы не следует носить с собой тяжелый ноутбук с программой.
Молчание ягнят
У вдумчивого читателя возникает закономерный вопрос: почему действует такая замечательная система, некоторые основные принципы которой были заложены еще в 20-х годах прошлого века, подтвердившая свою истинность и перспективность на многих конкретных примерах и отзывах реальных пациентов? , не демонстрирует экспоненциальную динамику развития? Почему хотя бы десять лет назад масштабные государственные программы по поддержке и продвижению проекта не только не состоялись, но даже публично не рассматривались? Возможно, vOICe просто ждал своего времени, когда на смену медленным процессорам и неэффективным камерам придут их более совершенные аналоги, позволяющие справляться с задачей, не подвергая мозг и психику перегрузке.В России самым мощным тормозом традиционно стал консерватизм власть имущих, которые предпочитают финансировать концерт для слепых, а не масштабную, долгосрочную серьезную программу их реабилитации.
Так или иначе, хочется верить результатам испытаний, а также тому, что эти результаты позволят проекту вырасти до социальных масштабов, как планируют его авторы.
Как и все энтузиасты, полные энергии и веры в уникальность и необходимость своей идеи, российская команда TEAM VOICE RASSIA под руководством Данилы Медведева поначалу очень рассчитывала на поддержку государства.
Время шло, но невидимая стена не становилась тоньше, коридоры становились короче, а чиновники становились лояльнее.
Потеря нескольких лет и накопившиеся эмоции заставили команду сменить схему стартапа на краудфандинг.
Это позволило нам сегодня собрать большую часть суммы, необходимой для запуска решающего этапа проекта.
Задача-минимум — создать пять улучшенных рабочих прототипов vOICe и передать их незрячим людям для длительной эксплуатации и испытаний в России.
На этапе ознакомления с системой и дальнейшего тест-драйва команда гарантирует психологическую помощь и возможности обучения для полного раскрытия потенциала системы.
Задача-максимум – реализация проекта на уровне социальной государственной программы с целью вовлечения инвалидов данной категории в нормальную жизнь общества.
Сегодня сложно сказать, получит ли проект развитие в России, получит ли он широкое распространение или останется достоянием немногих, но очень хочется верить, что «время слепых» пришло и место выбрано не случайно.
Для справки: один комплект vOICe с учетом полного курса обучения стоит менее 40 тысяч рублей.
Фактически пациент получает возможность самостоятельно передвигаться по незнакомой местности.
При этом затраты на обучение одной собаки-поводыря в Общероссийской общественной организации инвалидов «Всероссийское ордена Трудового Красного Знамени общество слепых» в 2013 году составили 1 млн рублей, в 2014 году — 1,2 млн.
рублей! Уважаемые читатели, напоминаем, что вы читаете блог компании iCover. Подписаться Обещаем, вам не будет скучно.
Теги: #Гаджеты #Биотехнологии #AR и VR #Medgadgets #voice #voice #суррогатное зрение #звуковое зрение vOICe
-
Выбор Хоста Для Вашего Онлайн-Каталога
19 Oct, 24 -
Сборник Анекдотов
19 Oct, 24 -
Создание Собственного Итератора
19 Oct, 24 -
Microsoft Azure Стек Tp1
19 Oct, 24 -
Приглашаем Вас На Gdg Devfest Омск 2014
19 Oct, 24
