【読書支援】本の内容を手話で伝える「StorySign」アプリ、ファーウェイが提供

本の内容を手話で伝える「StorySign」アプリ、ファーウェイが提供（C Net12/4）

ファーウェイの無料アプリ「StorySign」は人工知能（AI）を活用し、子供が本を読んでいるときに文字とともに手話を表示する。

アプリを開いてページの上にかざすと、Starというキャラクターが文字を認識して、該当箇所を強調表示しながら手話で子供に伝える。このアプリの狙いは、耳の不自由な子供の学習体験を強化し、子供と保護者が一緒に本を読めるようにすることだ。現状では、こうした子らが利用できる読書教材は不足している。

12月3日、欧州の10カ国でこのアプリをリリースした。各国の手話につき1作品しかサポートしておらず、「Android」スマートフォンでしか動作しない。今後拡大予定。

（サイトより引用）

語り聞かせのように、決まった内容に手話を対応させていくのは、それほど難しくはないです。

音声認識→自動手話表出が難しいのです。

YouTubeの説明映像もあります。英語ですが、自動翻訳も利用可能。