IOS 15のライブテキストを使用すると、周囲の世界を調べることができます

ライブテキストは、写真、スクリーンショット、またはライブカメラからのテキストを検索可能、コピー可能、編集可能なテキストに変換します。

iOS 15、iPadOS 15、およびmacOS Montereyでは、ライブテキストはどこにでもあります。スクリーンショット、フォトライブラリ、さらにはテキスト入力領域です。 画像内の単語を認識し、通常のテキストに変換します。 そこから、選択、コピー、共有、検索、さらには翻訳を行うことができます。 Live Textはまた、Appleの「データ検出器」をパーティーに持ち込むので、たとえば店の看板の写真にある電話番号をタップして、電話アプリで呼び出すことができます。

ペーパーバックの単語をタップしてその意味を調べたことがある場合は、印刷されたリンクを長押しします 雑誌でウェブプレビューを表示したり、場所の名前をタップして地図に表示したりすると、ライブが大好きになります 文章。 これにより、現実の世界が検索可能、編集可能、そしてより使いやすくなります。

それはうまくいく

新しいMac、iPad、およびiPhoneオペレーティングシステムでは、LiveTextがすぐそこにあります。 特別なモードはありません。 Appleは、意味のあるところならどこにでもライブテキストを追加しました。 スクリーンショットを撮るたびに新しいボタンがあり、画像内のすべてのテキストを強調表示できます。これは、これまでで最も複雑なものです。

ほとんどの場合、写真のテキストは単なるテキストです。 後で確認することを忘れないように、店で商品ラベルの写真を撮ったとします。 写真アプリでその写真を見ている場合は、テキストを指でスワイプするだけで選択できます。 今では、テキストのすべての画像も自動的にテキストになります。 そこから、共有、コピー、新しい組み込みの翻訳機能の使用、番号への電話、リンクのオープン、地図上の住所の表示などを行うことができます。

何でも検索

iOS 15を初めてインストールすると、フォトライブラリがスキャンされて処理され、見つかったテキストが認識されます。 これには非常に強力な意味が1つあります。Spotlight（システム全体の検索ツール）で何かを検索すると、写真のテキストの結果が含まれるようになります。

たとえば、領収書に記載されている可能性のあるテキストを検索するだけで、何年も前に撮影した領収書を見つけることができます。 コスタブラバで休日にそのおいしいご飯をどこで食べたかを思い出そうとしていますか？ メニューを撮影すれば、簡単に見つけることができます。

または、試さずにレシピ本を作ってみませんか？ 雑誌やレシピ本でレシピを見るたびに、写真を撮るだけでいつでも見つけることができます。

ライブテキストは、世界との関わり方を根本的に変えます。 突然、紙、店先、スクリーンショット、道路標識のすべての単語が、メモアプリのテキストと同じように使用できるようになります。

コンピューティングにはすでにこれの断片があります。 Googleの翻訳アプリは長い間カメラを介してテキストを翻訳することができ、iOSはしばらくの間メモアプリでドキュメントをスキャンしてOCRすることができました。 しかし、AppleがLive Textをデバイスに焼き付けたので、テキストの種類の区別はなくなりました。 それはすべて同じです。 Twitterに投稿されたテキストのスクリーンショットでさえ、適切に行ったかのように使用できるようになりました。

AR Lite

ライブテキストは、Appleが拡張現実に飛び込むもう1つの例です。 長年にわたるさまざまな基調講演での長すぎるデモから、新しいiMacが机の上でどのように見えるかを確認できる新製品のすっきりとしたARモデルまで、AppleがARにどのように取り組んでいるかを見てきました。 Appleはまた、たくさんのオーディオAR機能を追加し、メッセージやアラートを読んだり、AirPodsを介して道順を教えたりします。

これがAppleの最終的なARメガネ製品のすべての慣行であることは公然の秘密であり、LiveTextがその大部分を占める可能性があります。 眼鏡はあなたの周りの標識を読んで意識を高めるだけでなく、あなたがそれを読んでいるときに情報を調べることができます。

しかし今のところ、私たちは皆、AppleのAR実験の恩恵を受けています。 ライブテキストは素晴らしいです。 私はそれを数日しか使用していません、そしてそれはすでに自然に思えます。 アプリ開発者がそれを使って何をするのか楽しみです。