Drops: Tiny Luminous Units Reacting to Sounds for Hearing-Impaired Children

Visualize sounds for the Hearing-impaired
Drops is a tiny sphere device that visualize the strength of surrounding sounds by light emitting device. It equips a microphone, audio amp circuits, a microcontroller and a LED inside. The microcontroller converts the incoming sounds into luminous information on the basis of pre-defined mapping perception function. The hearing-impaired children are able to perceive how their voice spread in a space through visual sensation, thus enabling to assist their voice training.

In 2014, this device was demonstrated at 80th anniversary event of SHISEIDO's Beauty Consultant with the cooperation of 2nd group of beauty soft development in the SHISEIDO beauty creation development center. The kinetic beauty movement was converted into the acoustic information by wearable devices, and its acoustic waves were transformed into the visual information by using the drops device for enhancing beauty movements.

聴覚障害児のための音響伝播を提示する発光モジュール

Drops: Tiny Luminous Units Reacting to Sounds for Hearing-Impaired Children

本研究は,空間に自由に再配置可能な球型音響-光変換モジュールによる音響伝播可視化手法を提案するものです.モジュールはマイクロフォン,信号処理回路,マイコン,発光素子を備えており,外部からの音響情報を取得した後に事前に設定した感覚変換モデルに基づき光提示を行います.聴覚障害児が自身の発話の伝播範囲を視覚的に確認できたり,他者の存在に気づいたり,この特性を利用した遊びなど玩具として使用する事ができます.

2014年には,資生堂銀座ビルで行われた資生堂ビューティーコンサルタント誕生80周年イベントにて,資生堂 ビューティークリエーション開発センター ビューティーソフト開発2グループと協力し,ビューティーコンサルタントの身体運動を可聴化する装着型デバイスと合わせて本デバイス群を出展しました.

dr_shiseido2_image
dr_elec_image

発表論文他

査読付き英語論文・日本語論文・発表・展示会
鈴木健嗣,河原圭佑,西田惇,蜂須拓,"聴覚障害児の社会的相互作用を支援するスマートデバイス", キッズデザイン賞, Jul. 2016
* キッズデザイン賞
江口洋丞,谷尚樹,
西田惇"資生堂ビューティーコンサルタント誕生80周年イベント", 東京, Oct. 2014