AudioCraft

Это экспериментальный прототип для Blind Accessibility, написанный несколько лет назад, чтобы продемонстрировать Sonified Depthmap Renderer с возможностями фильтрации объектов для навигации в трехмерных пространствах от первого лица исключительно со звуком, на основе примера Minecraft, написанного Майклом Фоглеманом. Компоненты Sonifier основаны на предыдущей работе с алгоритмом Peter Meijers Image To Sound. Исходный код Python включен.

Это работает следующим образом: движок делает снимок как буфера глубины, так и буфера кадра, рисуя сплошные цветные текстуры без тумана или градиентов затенения. И карта глубины, и изображение кадра передаются в сонификатор, где изображение кадра можно использовать в качестве трафарета для вырезания определенных частей карты глубины путем выделения определенных цветов. Полученная карта глубины затем может быть преобразована в звук и передает положение целевых объектов. над трехмерной областью, такой как определенные блоки, хотя может включать в себя такие вещи, как определенные противники, цели, предметы, интерактивные объекты, опасности, двери и т. д. В идеале карта глубины устроена так, чтобы более близкие объекты были ярче, а дальние объекты темнее, хотя корректировки чтобы это могло обеспечить большую гибкость. Этот метод можно применить к любому существующему 3D-движку, который использует карты глубины в своем конвейере рендеринга в качестве доступного варианта специальных возможностей для навигации и дополняет другие функции, такие как хорошее звуковое сопровождение, маяки, голосовые меню и подсказки и т. д.

Чтобы играть, вы можете использовать клавиши W, A, S, D для перемещения иклавиши со стрелками или мышь, чтобы осмотреться. Пространство для прыжка. Вкладка для режима полета. Цифры 1-3 для выбора материала для сборки. Щелкните левой кнопкой мыши или Shift, чтобы удалить блок, щелкните правой кнопкой мыши или введите, чтобы разместить блок. Q для воспроизведения уникального звука блоков. Z, чтобы сказать, из какого материала сделан блок.

Для Sonifier вы можете нажать E, чтобы сканировать область перед вами, и выбрать тип фильтра с помощью клавиш F1–F5, F6 для зацикливания, с F7 и F8 для увеличения и уменьшения скорости воспроизведения соответственно.< /p>

Если вы столкнулись с какими-либо проблемами с производительностью, попробуйте отключить масштабирование экрана при настройках с высоким разрешением и запустить его в режиме совместимости с WinXP SP3.