?

Log in

No account? Create an account

Как дать слепому почувствовать, что такое радуга? - Общество дровосеков Бердичева по изучению Мишны

Nov. 30th, 2009

05:06 pm - Как дать слепому почувствовать, что такое радуга?

Previous Entry Share Next Entry

Подумалось вдруг, как можно было бы дать слепому с рождения человеку почувствовать, что такое радуга: берем тачскрин, человек водит по нему стилусом, а программа переводит пикселы под стилусом из RGB сначала в HSV, а потом в звук: hue - в частоту, скажем в диапазоне фортепиано (с деталями перехода от синего к фиолетовому к пурпурному и снова к красному нужно будет поработать), saturation - в примесь белого шума (баланс белого, яркость, контрастность и насыщенность должны настраиваться, чтобы не утомлять шумом или неинформативным тоном), value - в громкость.
Водить стилусом, понятное дело, можно будет с любой скоростью и в любом направлении; если сделать опцию подавления звука при движении, скажем, справа налево, то можно будет делать "построчное сканирование" картинки для получения общего представления о цветовой гамме.

Если кто-нибудь где-нибудь читал о подобных экспериментах, и о том, что из этого вышло - свистните. Я верю, что и это, как обычно, придумано до меня.

Comments:

[User Picture]
From:sanmai
Date:December 1st, 2009 01:39 am (UTC)
(Link)
Auditory sensory substitution systems


Edited at 2009-12-01 01:42 am (UTC)
(Reply) (Thread)
[User Picture]
From:spamsink
Date:December 1st, 2009 02:00 am (UTC)
(Link)
Спасибо. Странно, что именно то, что я предложил - система для детального "разглядывания" таким образом картинок - не упомянута.
(Reply) (Parent) (Thread)
(Deleted comment)
[User Picture]
From:cema
Date:December 1st, 2009 04:18 am (UTC)
(Link)
Почти терменвокс.
(Reply) (Parent) (Thread)
[User Picture]
From:cema
Date:December 1st, 2009 04:17 am (UTC)

однако

(Link)
Октава получается разностью частот в два раза (исключая странные тональности). Но всякая волна из видимого диапазона после удвоения из него выходит. А вот если бы человек мог видеть шире, то как выглядела бы "оптическая октава"?

Думаю, в каком-то смысле можно считать аналогом радуги хроматическую гамму, сыгранную в диапазоне немного меньше октавы (допустим, септима), и не на фортепиано, а на скрипке, на одной струне и без дёргания на каждой ступени, а плавно двигаясь между крайними точками. Разница в том, что радуга видна вся сразу, а сыграть все промежуточные звуки такой "септимы" сразу невозможно. Можно приблизить этот эффект взятием хроматического аккорда, но ощущения гармонии это не даст, в отличие от созерцания радуги.
(Reply) (Thread)
[User Picture]
From:spamsink
Date:December 1st, 2009 04:34 am (UTC)

Re: однако

(Link)
Если частотная разрешающая способность у слуха достаточная, то и септимы в районе 3-ей или 4-ой октавы, наверное, хватит - и тогда понижением или повышением на октаву можно будет что-нибудь обозначать, например, насыщенность. Ну и с линейностью нужно будет поиграть, ведь мы видим радугу не как непрерывное изменение цвета, а как несколько полос с переходами между ними.
(Reply) (Parent) (Thread)
[User Picture]
From:cema
Date:December 1st, 2009 04:41 am (UTC)

Re: однако

(Link)
Да, мы видим радугу полосатую, но почему так?
(Reply) (Parent) (Thread)
[User Picture]
From:spamsink
Date:December 1st, 2009 04:49 am (UTC)

Re: однако

(Link)
У нас же три вида колбочек; видимо, если конкретный вид возбуждается заметно сильнее, чем два остальных, мы воспринимаем цвет как оттенок красного, зеленого или синего, нежели как отдельный цвет.
(Reply) (Parent) (Thread)
(Deleted comment)
[User Picture]
From:spamsink
Date:December 1st, 2009 05:08 am (UTC)

Re: однако

(Link)
Кто сказал, что мы видим семь цветов? Мы называем семь цветов! А видим три полосы основных цветов и много-много промежуточных.
(Reply) (Parent) (Thread)
(Deleted comment)
[User Picture]
From:spamsink
Date:December 1st, 2009 05:48 am (UTC)

Re: однако

(Link)
Сколько в детстве научили, столько и видно.
(Reply) (Parent) (Thread)
[User Picture]
From:reedcat
Date:December 1st, 2009 08:05 am (UTC)

Re: однако

(Link)
И менно
(Reply) (Parent) (Thread)
(Deleted comment)
[User Picture]
From:spamsink
Date:December 1st, 2009 05:54 am (UTC)

Re: Кто сказал, что мы видим семь цветов?

(Link)
Где?
(Reply) (Parent) (Thread)
[User Picture]
From:_navi_
Date:December 1st, 2009 05:19 am (UTC)
(Link)
Спросил у знакомого (у него слепая жена и он интересуется темой accessibility & usability):
Mike: the smith kettlewell eye institute in san francisco had a project in the 90s
Mike: ski.org
Mike: there was also one at mit media lab
Mike: late 80s.
Mike: none have been well received by blind people for day to day use yet.
Me: because of some inherent problems, or something else?
Mike: the reasons i have heard is that either usefulness is too situational to warrant carrying it around, or for mobility aides like the "seeing cane" most prefer to hear unobstructed to an extra channel of information.
Mike: the latest one is the tongue display which most blind people, while they admit it might work, imagine to be too goofy to be caught dead using.
Mike: hearing doesn't have the bandwidth to allow for overlay channels that vision does. otherwise we couldn't ignore the tv or radio while working or focus on a speaker in a noisy room.
(Reply) (Thread)
[User Picture]
From:spamsink
Date:December 1st, 2009 05:53 am (UTC)
(Link)
По датчики на языке я знаю, я имел в виду прибор для детального "разглядывания" изображений предметов, у которых цвет имеет значение - тех же цветов, скажем. Если ни для чего другого, то хоть для распознавания номиналов купюр.
(Reply) (Parent) (Thread)
[User Picture]
From:andaja
Date:December 1st, 2009 08:58 am (UTC)
(Link)
в большинстве случаев зрение нужно в для распознования образов (от простейшего светло-темно до ...). да работает зрение и зрителное восприятие вовсе не попиксельно. то есть если и развивать такую штуку то надо ее с кинеститической частью совмещать. кинестетику использовать на части с относительно большим разрешением, поскольку ей можно вопринимать относительно крупные куски поверхности целиком и передавать на нее ч.б. "картинку" причем с доп. обработкой, а звуковую составляющую использовать исключительно на хроматическую часть, "подкрашивая" кинестетические ощущения. впрочем это и для зрячих будет более чем интересно.
но кабель в мозг вроде уже научились втыкать? я бы от трихроматического зрения не отказался.
(Reply) (Thread)