手話を読み取るソフト「 SureTalk 」の仕組み 

この青年の手話をどう読み解くか。



1.手話ユーザーである彼の身振りの特徴から、それを文字に置き換える。

2.音声ユーザーは、その文字から手話ユーザーの言わんとすることを理解する。

3.音声ユーザーは、手話ユーザーの質問に音声で答える。

4.その音声を文字に置き換えることで、手話ユーザーに趣旨が伝わる。

これが、手話と音声の双方向コミュニケーションシステム「 SureTalk 」です。

「SureTalk」を支えているのが、手話を解析する骨格推定AI技術です。

この3D姿勢推定技術は、手話と音声をリアルタイムでテキストに変換するコミュニケーションシステム「 SureTalk 」に採用されています。





[ PFNが指先の向きまで認識できる3D姿勢推定技術を開発、協業先を募集 ]

付録:2021ロボットドッグ




[ ホームページ工房 デイリー版 ]


inserted by FC2 system