IPhone Safari でのすべての操作を巻き戻して記録します

  • Rewind は、コンピュータ上で行うすべてのことを記録および検索するアプリで、iPhone にも登場しました。
  • Safariでのみ動作します。
  • GPT-4 の統合には、データの一部をアップロードする必要があります。
MacBook と iPhone で実行されている AI キャプチャ ツール Rewind のスクリーンショット。
MacBook と iPhone で巻き戻します。

Rewind.ai

覚えて 巻き戻しアプリ コンピューター画面をビデオでキャプチャし、OCR と音声テキスト変換を実行して、すべてを検索できるようにするものですか? それがiPhoneに戻ってきました。

の iPhone版の巻き戻し Safariのみですが、 同じように動作します. すべてのアクティビティのビデオ画面キャプチャを記録し、それを処理して、それらのページ上のテキストを認識し、後で検索できるようにカタログ化します。 そのアイデアは、見たことは完全にわかっているが、どこでいつ見たのか思い出せない Web ページの断片を見つけられるようにすることです。 デスクトップ版の主な懸念は、ユーザーに関する大量の個人データが蓄積される可能性があることでした。 iOS は Mac よりもはるかにロックダウンされているので、iOS の方が優れているのでしょうか? それとももっと悪いですか?

「理論的には、アプリが記録するものはすべてローカルで処理されるため、プライバシーは心配する必要はありません。 結果を得るために他のパーティのクラウドにデータをアップロードする必要はありません。 しかし、アプリにハッカーが悪用できる脆弱性が含まれていた場合、ユーザーの録音とそこに含まれる機密データが危険にさらされることになります。」 ポール・ビショフ、プライバシー擁護者と コンパリテックと電子メールでLifewireに語った。

デスクトップの巻き戻しですか、それともアプリですか?

デスクトップ Rewind は非常に便利なツールであり、コンピューターの一種のライフロガーです。 画面上のすべてに加えて、マイクなどからの音声もすべて記録すると、コンピューターの使用状況全体が記録される可能性があります。 次に、機械学習とオンデバイスを使用します。 光学式文字認識 (OCR) すべてを簡単に検索可能なテキストに処理します。

私たちは皆、そこに行ったことがある。 興味深い情報の断片を見たり、買い物をしていて完璧な靴を見つけたり、 または、誰かが Slack チャットまたは Zoom 通話で何かについて言及したが、どこで見たり聞いたりしたか思い出せない それ。 Rewind がそれを見つけます。 そして、コンピューターは人間よりもはるかに優れた記憶力を備えているため、時間が経つほど便利になります。

iPhone では、Apple のセキュリティ ルールのおかげで、巻き戻しは以下の環境でのみ機能します。 サファリ. そのため、デスクトップ版に比べて実用性がかなり制限されていますが、その一方で、ブラウザーはおそらくほとんどの人が最もよく使用するアプリです。 また、Rewind はスクリーンショットをインポートしてインデックスを作成するため、画面をキャプチャするだけで任意のアプリからデータを追加できます。

また、GPT-4 の統合も新たに追加され、これを使用してデータの検索と集計 (メールの要約など) が可能になります。

プライバシーの幻想

オリジナル バージョンのリリース直後、Rewind は文字起こしにクラウド サービスを使用したことを漏らしました。 後 大騒ぎが起こった、デバイス上の文字起こしに変更されました。つまり、デバイスからデータが流出することはありません。

MacBook と iPhone で実行されている AI キャプチャ ツール Rewind の別のスクリーンショット。
MacBook と iPhone で巻き戻し。

Rewind.ai

iOSのバージョンも同じです。 すべての処理はiPhone上で行われます。 しかし、そのような機密データを扱う企業がデータをクラウドに送信することを検討しているという事実自体が、一部の人々にとっては警告サインでした。

また、一方で iPhoneはかなり安全ですたとえローカルであっても、このような豊富なデータの宝庫を放置したくないかもしれません。

「閲覧履歴やオンライン活動の完全なログを保持すると、アプリのデータが適切に保護されていない場合、データ侵害や不正アクセスに対して脆弱になる可能性があります。」 プシュカル・バジパイ、プライバシー審査会社の事業責任者 VPN ガイドと電子メールでLifewireに語った。 「ストレージとパフォーマンスへの影響: 閲覧セッションを継続的に記録および保存すると、デバイス上のかなりのストレージ容量が消費され、パフォーマンスに影響を与える可能性があります。」

次に、Ask Rewind と呼ばれる GPT 統合に進みます。 これの問題は、これを使用するとデータの一部が失われることです。 する クラウドに送信する必要があります。 の下部にあるよくある質問では、 商品ページ、次のようになります。

「会議の要約機能や巻き戻し機能の使用を選択した場合、関連するテキストベースのデータのみが LLM パートナーに送信されます。」

理論的には、アプリが記録するものはすべてローカルで処理されるため、プライバシーは心配する必要はありません。

の ツイッターのスレッドRewind の共同創設者兼 CEO である Dan Siroker はこれらすべてについて率直に述べており、アクティビティを記録して要約することを提案するツールは常に少し不気味に見えるでしょう。 プライバシーの問題が発生する可能性があるため、これは常にデリケートな話題になります。 しかし、それは安全かつ適切に実行できないという意味ではありません。

これは、特に AI アシスタントを使用すると、個人データの宝庫からあらゆる情報を取得したり、メモを取ることをやめたりできる非常に素晴らしいツールです。 そしておそらく、 Apple の厳格な App Store のセキュリティとプライバシーの規則、少なくともそれが主張していることを実行します。

このようなツールにまだ満足していませんか? これはどう: iPhoneではテキストを検索できます 写真やスクリーンショットに含まれているため、代わりにそれを使用することもできます。 あまり便利ではなく、たくさんのスクリーンショットを撮ることになりますが、それでも良いトリックです。