Googleが音声および聴覚障害のある人に携帯電話をよりアクセスしやすくする

ライブキャプションは、あらゆる種類のビデオのデバイス上のライブキャプションを提供します。
ライブリレーを使用すると、音声障害のある人がGoogleアシスタントを使用して電話をかけることができます。
Google AIのProject Euphoniaは、音声障害のある人がこれまで以上に速く簡単に通信できるように作成されています。

携帯電話を当たり前のように考えるのは本当に簡単です。私たちはそれらをあまり考えずに毎日使用していますが、身体障害や障害を持つ人にとっては、最も単純な作業でも困難なことがわかります。 Google I / O 2019で、Googleはこれを変更するために取り組んでいる3つの新しいプロジェクト、Live Caption、Live Relay、Project Euphoniaを発表しました。

ライブキャプション

NetflixやYouTubeなどのツールでは、耳が聞こえない人や耳が聞こえない人がビデオにアクセスしやすくするためにクローズドキャプションを簡単に使用できますが、現在の段階ではキャプションに問題があります。すべてのビデオやサービスがそれらをサポートしているわけではなく、多くの場合、何らかのデータ接続が必要です。

ライブキャプションにより、Googleはあらゆる種類のメディアに対してリアルタイムでローカルのデバイス上のキャプションを提供するシステムを作成しました。 YouTube動画、自分で録画した動画、または文字通り何でも、Live Captionはデータ接続を必要とせずにその場で単語を書き起こします。

正確なリリース日はありませんが、Googleは「今年後半」のローンチを発表しています。

ライブ中継

逆に言えば、ライブリレーは、たとえ話すのが困難な場合でも人々が電話に出られるように設計されています。

誰かがライブリレーを使用して電話に応答すると、通話の相手は、Google Duplexの動作と非常によく似た、アシスタントを搭載したGoogleのライブリレーサービスを使用していると通知されます。

相手の人が言うことはすべて、Live Relayユーザーの画面にリアルタイムで文字起こしされます。返信するには、キーボードにカスタムメッセージを入力するか、Smart ReplyとSmart Composeを使用して、人がちょうど言ったこと。

ライブキャプションと同様に、ライブリレーは電話でローカルに実行され、動作するためにデータやWi-Fiを必要としません。

ライブリレーはまだ「研究段階」にありますが、今後よりも早くリリースされることを期待しています。

プロジェクトユーフォニア

最後になりましたが、Project Euphoriaは、ALS、硬化症、またはその他の発話障害のある人がこれまで以上に簡単にコミュニケーションできるように作成されています。

Googleあたり：

これを行うために、Googleソフトウェアは録音された音声サンプルをスペクトログラム、または音声の視覚的表現に変換します。次に、コンピュータは、一般的な文字変換されたスペクトログラムを使用してシステムを「トレーニング」し、このあまり一般的ではないタイプの音声をより適切に認識します。現在、AIアルゴリズムは、英語を話し、ALSに通常関連する障害を持つ個人に対応することを目的としていますが、より多くの人々のグループおよびさまざまな音声障害に研究を適用できると考えています。

音声認識の改善に加えて、音声またはジェスチャーを検出するためにパーソナライズされたAIアルゴリズムをトレーニングし、Google Homeへの音声コマンドの生成やテキストメッセージの送信などのアクションを実行します。これは、重度の障害を抱えて話すことができない人々に特に役立つかもしれません。