Гледайте с ушите си! The vOICe за Android картографира изгледи от камерата на живо към звукови пейзажи, предлагайки разширена реалност и безпрецедентни визуални детайли за напълно слепи чрез сензорно заместване и компютърно зрение. Също така включва говорещ OCR на живо, говорещ цветен идентификатор, говорещ компас, говорещ детектор за лице и говорещ GPS локатор, докато разпознаването на обекти Microsoft Seeing AI и Google Lookout може да се стартира от The vOICe за Android чрез докосване на левия или десния край на екрана.
Това игра с обогатена реалност ли е или сериозен инструмент? Може да бъде и двете, в зависимост от това какво искате да бъде! Крайната цел е да се осигури форма на синтетично зрение на незрящите, но зрящите потребители могат просто да се забавляват, играейки играта на зрение без зрение. Потребителите с тежко тунелно зрение могат да опитат слуховата обратна връзка и да забележат промени в зрителната периферия. The vOICe за Android се инсталира на смартфони и таблети, но също така е съвместим с повечето интелигентни очила, като използва малката камера в тези очила и специален потребителски интерфейс за генериране на наслагване на звукова разширена реалност на живо, без ръце! Може да използвате външна батерия, свързана чрез USB кабел, за да предотвратите твърде бързото изтощаване на батерията на умните очила. Можете да ни помогнете, като пишете в блогове и туитвате за вашия опит, вашите случаи на използване и за това как се научавате да виждате със звук.
Как работи? Гласът използва височината на тона и силата на звука за яркост при едносекундно сканиране отляво надясно на всеки изглед. Диагонална (с десен край нагоре) ярка линия звучи като нарастващ тон, светло петно като бипкане, ярък запълнен правоъгълник като шумов взрив, вертикална мрежа като ритъм. Използва се най-добре със стерео слушалки за най-завладяващо изживяване и най-подробна звукова разделителна способност.
Просто първо експериментирайте с прости визуални модели, защото изображенията в реалния живот са изключително сложни. Пуснете произволно ярък предмет като конструктор Lego DUPLO върху тъмен плот и се научете да посягате към него само чрез звук (затворете очи, ако имате зрение). След това опитайте да проучите собствената си безопасна домашна среда и се научете да свързвате сложните звукови модели с това, което вече знаете, че е там. Зрящите потребители могат също да използват приложението със съвместими с Google Cardboard устройства чрез плъзгане надолу на главния екран, за да превключват бинокулярния изглед.
За сериозни потребители: да се научиш да виждаш със звук е като да научиш чужд език или да се научиш да свириш на музикален инструмент, което наистина изисква постоянството и пластичността на мозъка. Може да е най-добрата система за обучение на мозъка, свързваща сетивата чрез изкуствена синестезия.
Общо ръководство за обучение за The vOICe (не е специфично за версията на Android) е достъпно онлайн на адрес http://www.seeingwithsound.com/manual_ru/The_vOICe_Training_Manual_ru.htm
Защо Гласът е безплатен? Защото нашата основна цел е да направим реална промяна, като намалим бариерите, за да използваме колкото е възможно повече. Ще откриете, че конкуриращите се технологии струват над $10 000 и въпреки това имат по-ниски характеристики. Разделителната способност на възприятието, предлагана от The vOICe, е несравнима дори с ретиналните импланти за 150 000 долара за "бионично око" (PLoS ONE 7(3): e33136).
The vOICe за Android поддържа английски, холандски, немски, френски, испански, италиански, португалски, естонски, унгарски, полски, словашки, турски, руски, китайски, корейски и арабски (Опции на менюто | Език).
Моля, докладвайте грешки на feedback@seeingwithsound.com, и посетете уеб страницата https://www.seeingwithsound.com/android.htm за подробно описание и отказ от отговорност. Ние сме в Twitter на @seeingwithsound.
Благодаря ви!