ChatGPT ドキュメント
日本語
お問い合わせ goolvyouyou@gmail.com

Appshots

Appshots

あらゆる Mac アプリのコンテキストを ChatGPT に提供します

Appshots を使用すると、最前面のアプリウィンドウを ChatGPT のチャットへ送信できます。コンピューター上の別のアプリで作業中に、その時点のコンテキストを ChatGPT に提供してタスクの支援を受けたい場合に使用してください。

appshot が取得する内容

appshot は最前面のウィンドウだけを取得します。次の内容が含まれる場合があります。

  • 表示中のウィンドウの画像。
  • そのウィンドウから取得できるテキスト。表示中のテキストと、表示範囲外にあるもののアプリから取得可能なテキストが含まれます。

appshot をチャットに追加すると、添付ファイルとして扱われます。ChatGPT は、手動で添付したファイルや画像と同様に、appshot をセッションファイルへローカルに保存します。

appshot を使用する場面

ChatGPT が操作を行う前に別のアプリのコンテキストを必要とする場合は、Appshots を使用します。

例：

  • API リファレンスページを共有し、それを使用するスクリプトの作成を ChatGPT に依頼する。
  • メールまたはカレンダーの画面を共有し、次のステップの下書きを ChatGPT に依頼する。
  • 画像エディター、デザイン、プレビューウィンドウを共有し、関連するアセットやコードの修正を ChatGPT に依頼する。
  • 説明するより見せるほうが簡単なエラー、設定パネル、アプリの状態を共有する。

appshot を撮影する

  1. 共有したいアプリのウィンドウを最前面に表示します。
  2. macOS では左右の Command キー、Windows では左右の Alt キーを同時に押すか、 ChatGPT の設定で指定したカスタムホットキーを使用します。
  3. ChatGPT から求められた場合は、権限の設定を完了します。
  4. Appshot を使ってタスクを実行するよう ChatGPT に依頼します。
Appshot の添付ファイルとフォローアッププロンプトが表示された ChatGPT のチャット入力欄

デフォルトでは、ChatGPT は appshot 用に新しいチャットを開始します。過去 60 秒以内にチャットを操作していた場合は、代わりにその直近のチャットへ appshot を追加します。 appshot を続けて撮影すると、同じチャットに追加されます。

アプリの設定で、ホットキーと Appshot の送信先 を変更できます。 送信先を指定するには、現在のチャット または新しいチャット を選択します。ここで説明した動作を使用するには、 自動 のままにします。

フローティングコントロールから Appshots を使用する

macOS で、ペットのフローティングコントロールが 開いていて、ChatGPT のメインウィンドウが背面にある場合、自動 では そのコントロールから Appshot を添付した新しいチャットが開始されます。ペットとして Mini を選択している場合も同様です。Appshots の権限設定は、あらかじめメインアプリで 完了してください。Windows では、Appshots はメインアプリで開きます。

権限と安全性

macOS では、Appshots を撮影する前に、ChatGPT が次の権限を求める場合があります。

  • Screen & System Audio Recording を許可すると、ChatGPT は最前面のウィンドウの画像を取得できます。
  • Accessibility を許可すると、ChatGPT は最前面のウィンドウから取得可能なテキストを読み取れます。

appshot を撮影すると、取得された画像と利用可能なテキストが ChatGPT と共有されます。タスクに必要でない限り、機密性の高い内容の appshot は撮影しないでください。

ChatGPT とスクリーンショットやドキュメントを共有する場合と同じように、appshot の内容を確認してください。

制限事項とトラブルシューティング

Appshots を使用するには、macOS または Windows の ChatGPT デスクトップアプリが必要です。 Appshot を含むチャットを CLI で再開すると、添付ファイルは チャット履歴に含まれますが、CLI で新しい Appshot を作成することはできません。

Google Docs、Gmail、Google Sheets、Google Slides を含む一部のアプリや Web サイトでは、 ChatGPT が受け取れるのは表示中のスクリーンショットだけで、ドキュメント全体や画面外のテキストを受け取れない場合があります。ChatGPT Work または Codex では、ChatGPT は対応するインストール済みプラグインを使用して関連するアプリの内容へアクセスし、リクエストを支援できます。

Appshots が機能しない場合は、デスクトップアプリを更新し、設定したホットキーを確認して、 組織が Appshots の使用を許可していることを確認してください。macOS では、 権限も確認してください。

  1. System Settings > Privacy & Security を開きます。
  2. Codex Computer Use の Screen & System Audio Recording と Accessibility を確認します。
  3. アプリを再起動して、もう一度試します。