この画像を大きなサイズで見る25歳のケニア人エンジニアで革新家のロイ・アレラ氏が開発したのは、手話で会話する耳の聞こえない人と、耳は聞こえるが手話のできない人が瞬時にコミュニケートできる手袋デバイスだ。
この「Sign-IO」という手袋デバイスを使うことで、手話を行う手の動きを翻訳して、瞬時に音声に置き換えてくれるという。
この手袋が聴覚障碍者との会話の架け橋になることが期待されている。
手袋デバイスが手話の動きを認識し音声に変換
この手袋には、それぞれの指に仕込まれたセンサーが、各指が決まった位置までどこまで曲がるかなど、その位置を見極めることができる。
手袋は、ブルートゥースでアンドロイド携帯につながっていて、そこで音声変換ソフト機能を利用して、手話の動きを翻訳して音声としてアウトプットする。
この画像を大きなサイズで見る耳の聞こえない姪っ子との体験がきっかけ
Sign-IOのアイデアは、耳の聞こえない幼い姪っ子とアレラ氏の個人的な体験がきっかけだったという。
アレラと家族は手話はできたが、それでも姪との適切なコミュニケーションには苦労していた。
「姪が彼女の携帯かぼくの携帯と同期したこの手袋をはめて、歌い始めた。そうすると、彼女が言っていることがわかったんだ」アレラは語る。
この画像を大きなサイズで見る聴覚障碍のある人々の手助けに
アレラの構想は、まずこの翻訳手袋を故郷のケニアの特別にこうしたニーズがある学校に設置し、そこからできるだけたくさんの聴覚障碍児童に広げていこうとしている。
この手袋は、多くの最先端プロジェクトの中のひとつだが、特定の障碍や制限のある人たちを援助する支援技術機器の成長市場に貢献しようとしている。
センサーをベースとした多くの機器は、状況の異なる人々の間のコミュニケートの架け橋になったり、能力ギャップを埋めるために作られ、市場に出回って一般的に利用可能になれば、2024年までに300億ドル以上の収益を生み出すと予想されている。
現在、この手袋は開発の試作段階で、まだ一般には売り出されていないが、すでにかなり話題になっていて、2018年の米国機械学会（ASME)のHardware Trailblazer Award大賞、ロンドン王立アカデミー工学リーダーの準優勝を受賞している。
References:globenewswire / royallela/ written by konohazuku / edited by parumo
たまに来るウチのお客さんに耳が不自由な人がいて、私は手話がわからないんだ……いつもそのお客さんに余計な苦労をさせてしまっているし、コレ実用化の暁には大勢が助かるな（勿論手話を覚えるに越したことは無いが）
これは今手話でコミュニケーション取ってる人向けだろうけど、スマホ使用が前提ならこれからはもう、テキスト入力と読み上げツールでいいんじゃないかしら。聞き取りも音声入力があるし
ありそうでなかった。こりゃ良いね。
※2 ※7
手話に限定せずとも特定の仕草と意味をリンクさせるという概念的に見れば、文字や言語を持たない動物とのコミュニケーションだって出来るようになるかもしれない。何にせよ意思疎通の手段が増えるの良いことだ。
※2
※7
手話放送見たことないの？
文字入力や筆記よりも遥かに早い
これは良いものだね！
手話も覚えるのも大変だし海外ではまた違うし、こういうツールがあると絶対助かるよ！
※2
※7
じゃあ実用化されてもお前らは使わなければ済む話じゃね？
実際に耳が不自由な人と接してもそう思えるのかね？
※25
これを使うのは聴覚障害を持ってる側の人であって、相手は使わないよ。
相手は手話か筆談で話すことになる。
自分の勘違いだったらごめんね。
これは逆の機能の手袋が欲しいと思った
普通の声の言葉を話すと手話にしてくれる装置だ
物理的に指を曲げてくれなくても、スマホの画面表示でも良い
>>3
スマホのメモ帳に用件書けば良いだろ
>>3
音声入力でいいんじゃね
スマホ・・・
思い立って開発に移れるの凄い…
VRチャット内でアバター同士が手話で会話してる動画を以前見かけたのだけど、現実の技術はもうここまで来てるのか…
凄い！実用化に向けて頑張ってほしい！
わざわざ手話を変換する必要性を感じない・・・
手を動かすなら手で文字入力でいいし、紙に書いてもいいね
>>7
難癖付けないと気が済まないのか？
※7
このアイデアのポイントは
聴覚障害を持った人の目線で考えられたことじゃないかな
(障害を持たれている人だったらごめん)
筆談を相手に押し付ける事がなくて済むのは心理的に楽…と考えてみたよ。
流暢な意思疎通ができるほうが自分はいいし、翻訳機も併用すれば言語の壁はなくなっていく。
もう前のコメであるけど自分も音声言語→手話言語デバイス欲しいな。
巨人の星みたいな養成ギブスができそうだけど
※19
音声ソフトに手入力した方が自由に話せるんじゃないかと思ったんだけど。
実際使ってみないとわからないか。
※19
手話にも音声言語の単語を手話に置き換えただけものと音声言語とは別個の視覚言語としての手話があるんだけど、
後者の場合は「手話」とはいうけど実際には手や腕の動きだけではなく、
口の形や目の開き方、眉の上げ下げ、顎や唇の突き出し、うなずきや首振りなど「非手指動作」と呼ばれる手や腕以外の要素が文法的な働きを持ってる
それまで再現しようとすると、養成ギブス着けた上で顔や首に電極貼りまくらないといけないかも
※24
そうやな…その場合は手袋やセンサーよりも、
人間の目と同じく二つのカメラを備えた高度な動画認識が必要になるね。
高性能な汎用AIを備えた手話通訳ロボットみたいな感じになるだろうと思う。
※19他
聴覚障害者の中で手話を自在に使える人は少数派だということを世間は知らなさすぎることをお伝えしておきたい
ちょっと古い統計で申し訳ないですが
平成14年頃、手話を主体とした生活をしている聴覚障害者は全体の14％
しかも先天性が使う手話と中途失聴者が使う手話は似て非なる部分も多々あったり
Eテレがより時間をかけてやってるのは先天性の人たちが使う手話
方言というか地域によって表現が違ったりもする
いろいろデリケートな話題でもあるので
どうか聴覚障害者＝みんな手話ができる・で生活してる、とだけは思わないでほしいです
先天性の聴覚障害者ですら、病院や薬局等、専門用語が出るシーンでは特に、ほぼ間違いなく筆談です
どうか、筆談やスマホ画面での文字によるコミュを厭わないでいただきたい
もちろんこの発明を貶すようなことではありません
そこだけは誤解なきよう
>>7
言葉を発するのとスマホで文字を打つの、どちらが速い？
>>7
その文入力するのに
何秒かかった？
クラウドファンディングで募集したら半日で募集金額以上来るぞ
これ施設や多くの人が絶対に欲しいと思うぜ
え？？？？
うん…、まあ識字問題があるから手話のほうがいい場合もあるんだろうけど・・・・
ドリフの研究所コント
仲本工事「スマホで動かす手話装置を開発しました ! 」
いかりや「馬鹿 ! スマホ画面を見せればいいだろ馬鹿 ! 」
わいの父母二人とも文盲だからありがたいわ
ああ！すげえ！
難しかった意思疎通の一つが解消される！
今まで文字に書いてもらったり、ものすごく面倒だったもんね。
出力をiPad等のデバイスにして胸にぶら下げるだけで広く意思表示も可能になる。
でも 私は手話をしても相手はスマホに見てる
・・・・・
手の形だけで表現できるものは限られるから意思を表示するために顔の表情とか手の振り方の強弱で補足するのが手話なんじゃないの
だからスマフォとか文字入力とかなに言ってんのって思うわ
指を強制的に動かされるオート手話マシーンだったら感動した。
※17
同じコト思った
タイトル見た時そうなのかなと思った
逆デバイスだと手話覚える勉強になるのに
オーケストラの指揮者と会話できる
開発したのがケニアの人ってところもミソなんじゃあ あるまいか？
アフリカもそろそろくるでぇこりゃ
そのうちスマホの画像認識と音声認識を介してシームレス会話できるようになりそう
ろう者の手話 →（スマホカメラで画像認識）→ AIが読み上げ
健常者の言葉 →（スマホマイクで音声認識）→ スマホ画面で３Dモデルが手話
手話は世界共通でなくて（指文字は別として）日本の手話を覚えても世界には通じない。手話がブーム的に興味持たれたときもあったけど、常時使わなければ日常には浸透していかないし、双方が知らなければ役に立たない。
そういった欠点を補正しうるこの装置は、過渡的なものであったとしても非常にユニークで有効的だと思う。
どっちにしても『手話が主な意思疎通手段』という人にとっては
有難いデバイスだと思う。他の意思疎通手段も持つ人によっては
大した事に思えないかも知れないけど、切実に困っている人には
朗報だろうと思うよ？これで今までに無い便利さを提供できるなら
開発を続けて欲しいと思う
このデバイスが無駄だ..とは感じないが、使う人を選びそうだな、とは思った。
とはいえ、こちら手話や聴覚障碍の事情には詳しくないので、実情は知りたいな。
一番気になるのは、手話からデバイス、Bluetoothでのアプリへの伝達速度。
そんでもって、読み上げの速度、抑揚をどうするか。
読み上げだと抑揚がなく、機械音声なので早口になれば聞き取りにくいし、ゆっくりした読み上げだと時間がかかる。
短い文章であれば、いわゆるこの「ラグ」は関係ないと思うし、長文でもスピードさえ調整すれば、文字入力して見せるより早いかもしれない。
早く実際に使われたフィードバックを通して、最適化していって欲しいね。
いや、この手のデバイスはこれまで何度も発案されていて、
そのたびにネットでニュースが流れてるよ。
ちょっとググってみればいくつか、そのニュースが見つかると思う。
で、ぜんぜん実用にならないんだな、これがｗｗｗ
だって手話は指の曲がり具合を知るだけでは解読できないんだもんｗ
ボディーや顔に対する両手の位置や向きも重要な要素なんだよ。
だから、手にセンサーをつけるだけじゃダメ。
手話をしている人をカメラでとらえて、かなり複雑な画像認識をしなきゃ
手話の翻訳はできない。
こういうのね～、発案者はみんな学生なんだよね。
ハッカソンとかで、手話が実際どういうものかも知らないのに
浅い考えでアイディアだけ出して、夏休みの工作レベルの試作品を作って発表するの、
それをまた手話の何たるかを知らない奴が見て
「わお、すごいアイディアだ！なんでこれまでだれも思いつかなかったんだ」と
騒ぐんだなｗ
そのあと、本当に実用に向けて考え始めると、当初のアイディアではぜんぜん
ものにならないことに気づいて、お蔵入りというわけさｗ
※36
市販化されていないからこそ、記事中のアレラ氏は自分で開発する必要が有ったんじゃない？この手袋が大量生産されるかどうかはさて置き、自分で便利に使えているんだから良いと思うけど？アレラ氏が姪っ子さんと良いコミュニケーションを取ってくれる事を願うよ。
※37
> 現在、この手袋は開発の試作段階で、まだ一般には売り出されていないが、すでにかなり話題になっていて
ってあるだろ？これまでもそういうレベルで終わってたんだよ。
試作だけ作って、話題になって、そこで終わり。
見た感じ、過去の試みと同レベルなようだから、やはり同じ結果に終わるだろう。
この方法では、既存の普通の手話を翻訳することはできない。
「このデバイスに合わせた、新しい専用の手話」を考案して、ユーザーは
それを学ぶ必要があるんだよ。おそらく発明者が姪とコミュニケーションを
とっているのもそういう方法だろう。
で、「このグローブでしか使えない言語を新たに覚える面倒がある上に、
いつもこんな変なグローブつけて生活するより、メモに字を書いて見せる
昔ながらの方法がずっと楽でシンプルで安上がりで話が早いわｗ」ってことになるんだな。
むしろ新しい入力デバイスになればいい。
手話をキーボードの様に使えれば話者が増えるんじゃないか？
将来的にこれが発展していけば手話の翻訳コンニャクみたいなアレもできるってことだろ？
耳聞こえないし英語もよくわからんって人が英語の人とコミュニケーション取れる可能性、すごない？