Seeing AI 4+

Name: Seeing AI
Rating: 3.9 (97 reviews)
Author: Microsoft Corporation

視覚障碍者向けトーキングカメ‪ラ‬

Microsoft Corporation

- 3.9 • 97件の評価

- 無料

説明

Seeing AI は、ユーザーの周囲の状況を説明する無料のアプリです。視覚に障碍のある方や視力の低下した方のコミュニティと共に、そうした方々のために設計されたこの進行中の研究プロジェクトでは、AI の機能を活用して、近くの人、テキスト、物を説明して、視覚世界を広げます。

Seeing AI では、日常生活で生じるさまざまな活動を支援するツールが用意されています。
• 短いテキスト - カメラを向けると瞬時にテキストを読み上げます。
• ドキュメント - 印刷されたページをキャプチャするための音声ガイダンスが提供され、テキストを元の書式と共に認識します。
• 製品 - オーディオビープ音を使用してユーザーをガイドし、バーコードをスキャンします。可能な場合は、名前とパッケージ情報を読み上げます。
• 人 - 人の顔を保存しておくと、その人を認識し、年齢、性別、表情を推定することができます。
• 通貨 - 紙幣を認識します。
• シーン - キャプチャされたシーンの全体的な説明を音声で説明します。画面上で指を動かすと、さまざまな物の場所の説明を聞いて、写真を確認できます。
• ワールド - 空間オーディオで周囲の物に関する音声アナウンスを聞くなど、馴染みのない環境を説明するオーディオ拡張現実エクスペリエンスが提供されます (LiDAR を搭載したデバイスと iOS 14 以上が必要)。
• 室内ナビゲーション - ワールドチャンネルで利用でき、[入り口から教室へ] などの建物を通るルートを作成して、音声でナビゲートします (A9 以降のプロセッサを搭載したデバイスと iOS 14 以降が必要です)。
• 色 - 色を識別します。
• 手書き - グリーティングカードのように手書きのテキストを読み上げます (一部の言語で利用できます)。
• ライト - 周囲の明るさに応じてトーン音を生成します。
• 他のアプリの画像 - [共有] と [Seeing AI で認識] をタップするだけで、メール、写真、Twitter などの画像が説明されます。
• [写真の参照] - デバイスに保存されている写真を音声で説明します。

Seeing AI は、コミュニティにヒアリングしながら、AI の研究の前進と共に進化を続けます。

YouTube プレイリスト: http://aka.ms/SeeingAIPlaylist でチュートリアルをご確認ください

質問、フィードバック、機能のリクエストについては、SeeingAI@Microsoft.com にメールでお送りください。

2024年4月5日

バージョン 5.3

• Find My Things - この新機能は、iOS 14 以降を実行しているデバイスのワールドチャネルを介して利用でき、お客様自身のオブジェクトを認識するよう Seeing AI に教えることができます。ほとんどの AI システムは汎用オブジェクトの大規模なデータセットに焦点を当てているため、Microsoft は、新しいオブジェクトをお客様自身が教えるオーディオ優先エクスペリエンスを提供するこのシステムを構築しました。これにより、お客様はオーディオキューに従ってお客様のオブジェクトを見つけることができます。
• 写真に関する質問 (英語のみ) - シーンチャネル上の写真、Browse Photos 内の写真、または別のアプリで共有されている写真に関して Seeing AI に質問できるようになりました。たとえば、充実した内容の説明を聞いた後、画像の特定の側面に関する詳細を聞きたい場合があります。
• [詳細情報] をタップしたときのリッチな画像説明が、より詳細な情報を含むように改良されました。さらに、識別するように Seeing AI に学習させたユーザーの名前が含まれるようになりました。また、これは、Seeing AI がローカライズされている 19 言語のすべてで利用できるようになりました。
• 手書き認識が、日本語と韓国語でも利用できるようになりました。
• ドキュメントの向き - ドキュメントをスキャンした後、文書がどの方向を向いているかを確認できます。たとえば、複数のページを整理してホチキスで止める場合などに便利です。[詳細]、[ページ情報] の順にタップします。
• さらに、内部でさまざまなバグ修正が行われています。

3.9／5

97件の評価

あと少し

認識は上手くいっています。ですが、案内の仕方で「端が表示されていません。」と言うのではなく、「もう少し上にカメラを動かしてください。」と言うように誘導を変えていただけると嬉しいです。
よろしくお願いします。

縦書き記事への対応をお願いします

無料でこうした読み上げアプリを利用できるのはありがたいのですが、日本語の縦書き記事を読み上げた文章が切れぎれで意味をなしません。どうも通常の右から左ではなく、逆に(横書きや英文のように)左から右に読みこんでいることが原因のようです。おそらく以前に比べると単語や文節の認識性能などは上がってきていると思うので、こういう初歩的なところでつまずいて利用されなくなるのはもったいないと感じます。日本人の一般的なユーザーの意見を聞いて改善を進めていただくことを望みます。