あるとき耳が悪い人がバーに入ってきた。アメリカン・ジョークの始まりのようだが、手話が使えるバーテンダーがほぼいない以上、バーで話が弾んだ、なんてことにはならない。こんな場面で活躍するのが「ハンド・トーク」（話された言葉をアバターがスマホ画面で手話に変換するアプリ）だ。

今のところ、ハンド・トークが変換できるのはポルトガル語の手話「リブラス（Libras、プログラムを作ったロナウド・テノリオの母国ブラジルで使われている手話）」だけだ。しかし、ブラジルだけでも少なくとも1000万人の難聴者がおり、100万人がモバイルアプリ「ハンド・トーク」をダウンロードしている。

ユーザーは、画面に「お話を手話に翻訳します」と表示されたスマートフォンを話し相手に向けるだけだ。会話が始まるとアニメーション型アバターのヒューゴが手話に翻訳してくれる。

600万

毎月ハンド・トークで翻訳されている翻訳数

手話通訳では、単純に会話を手の動作に置き換えるだけではなく、ヒューゴの表情も内容に応じて変化させる必要があり、話し言葉をジェスチャーのアニメーションに変換するのは、手間のかかるプログラミングになる。表情は、手の動きと合わせて、手話の意味を補完するのだ。テノリオの開発チームは、毎月数千の例文をプログラムに送り、手話の3Dアニメーションと組み合わせている。開発チームは常にアプリケーションを更新して、手話通訳の精度を高め、表情を改善させている。

テノリオは、今後さまざまなバージョンのアバターを展開する予定で、ユーザーがバーチャル手話通訳ヒューゴの性別や人種を変更することで、表現力を高め、わかりやすくしようとしている。

（ジュリア・スクラー）

人気の記事ランキング

1. Why handing over total control to AI agents would be a huge mistake 「AIがやりました」 便利すぎるエージェント丸投げが危うい理由
2. OpenAI has released its first research into how using ChatGPT affects people’s emotional wellbeing チャットGPTとの対話で孤独は深まる？ オープンAIとMITが研究
3. An ancient man’s remains were hacked apart and kept in a garage 切り刻まれた古代人、破壊的発掘から保存重視へと変わる考古学
4. How to have a child in the digital age 「あなたはもうママですね」 ネット・デジタルが約束する 「完璧な出産」の幻想

• 0