[実行] (プレビュー) をクリックすると、操作を実行できる画面上のテキストと画像を特定することで、作業をより迅速に行うことができます。 [実行] をクリックすると、画面上の内容が分析され、アクションを実行するテキストまたは画像を選択できます。
このスクリーンショットの分析は、常にデバイスでローカルに実行されます。 分析は、[クリックして実行] をアクティブに操作した後にのみ開始され、クリックして実行を終了すると終了します。 [実行] をクリックすると、それらのテキストや画像の内容ではなく、テキストと画像のみが識別されます。 画面に表示されていない最小化されたアプリケーションなどでは、コンテンツは分析されません。
コンテンツは、 Web の検索などのアクションを完了することを選択した場合にのみ共有されます。 [Click to Do]\(クリックして実行\) がアクティブな場合、カーソルは青と白になります。 カーソルは、その下の情報の種類に応じて図形も変更されます。 クリックして実行すると検出されるコンテンツの種類に基づいて、情報の変更に対して実行できる操作。
注: クリックすると、Windows Insider Program を通じて Copilot+ PC がプレビューで利用できるようになりました。 詳細については、「開発チャネルでの Windows Insider での Copilot+ エクスペリエンスのプレビュー」を参照してください。
システム要件
リコールが有効になっているCopilot+ PC
-
Click to Do を使用するためにリコールのスナップショットを保存する必要はありません
よりインテリジェントなテキスト アクションは、現在、言語が AMD と Intel 搭載の Copilot+ PC のサポートを受けて英語に設定されている場合にのみ、Snapdragon 搭載の Copilot+ PC でのみ使用できます。
クリックすると、テキストでさらに多くの操作が実行されます
[クリックして実行] でテキストを強調表示すると、次のオプションが表示されます。
-
コピー: 選択したテキストをクリップボードにコピーします。
-
で開く: 選択したテキストをメモ帳などのテキスト エディターで開きます。
既定の言語が英語に設定され、少なくとも 10 語が選択され、Microsoft アカウントまたはMicrosoft Entra アカウントでサインインしている場合は、よりインテリジェントなテキスト アクションを使用できます。 Phi Silica の小さな言語モデルと NPU を利用したインテリジェント テキスト アクションには、次のものが含まれます。
-
要約: 選択したテキストのメインポイントの概要を簡単に示します
-
書き換え (カジュアル): カジュアルなトーンを使用して選択したテキストを修正します
-
書き換え (正式): 正式なトーンを使用して選択したテキストを修正します
-
絞り込み: 選択したテキストを修正し、文法を改善します
強調表示されているテキストがメール アドレスの場合は、テキストをコピーするか、メールを送信します。
-
メールの送信: 既定のメール アプリを使用して、選択したメール アドレスへの新しいメールを開きます
強調表示されたテキストが Web サイトの場合は、テキストをコピーするか、Web サイトを開きます。
-
Web サイトを開く: 既定のブラウザーで選択した Web サイトを開きます
画像をクリックすると、より多くの操作が実行されます
画像を選択すると、次のオプションが表示されます。
-
コピー: 画像をクリップボードにコピーします
-
名前を付けて保存: 指定した場所にイメージを保存します
-
共有: イメージ ファイルの [共有ファイル ] オプションを開きます
-
Bingを使用したビジュアル検索: 既定の Web ブラウザー を使用してBing を使用してビジュアル検索を実行します
-
写真で背景をぼかしる:写真アプリで背景をぼかしる
-
写真でオブジェクトを消去する: フォト アプリを使用して画像内の不要なオブジェクトを消去する
-
ペイン t で背景を削除する: ペイントを使用してイメージの背景を削除する
ヒント: Microsoft フォトまたはペイントのオプションが表示されない場合は、最新バージョンのアプリが Microsoft Store からインストールされていることを確認してください。
クリックして実行する方法
Windows ロゴ キー + マウス クリックまたは Windows ロゴ キー + Q を使用するだけで、「クリックして実行」と入力し、クリックした内容に対してアクションを実行します。 切り取りツールがインストールされている場合は、[切り取りツール] メニューから「Click to Do by」と入力することもできます。 必要な場合は、[Windows Search からクリックして実行] を検索して、表示される内容を選択してアクションを実行することもできます。
[プライバシーに関する考慮事項を行う] をクリックします
[クリックして実行] からアプリに情報を送信することを選択した場合 ([ペイント]、[クリックして実行] の順にクリックすると、転送を完了するためにこの情報が一時的に保存されます。 [実行] をクリックすると、次の場所に一時ファイルが作成されます。
-
C:\Users\{username}\AppData\Local\Temp
フィードバックの送信を選択すると、一時ファイルが保存される場合もあります。 これらの一時ファイルは長期保存されません。 [実行] をクリックしても、要求されたアクションが完了した後も画面のコンテンツは保持されませんが、一部の 診断データ が収集され、[Click to Do]\(クリックして実行する\) がセキュリティで保護され、最新の状態に保たれ、作業が維持されます。
[集計]、[書き換え (カジュアル)]、[書き換え (正式)]、および [リファイン] など、Do のよりインテリジェントなテキスト アクションをクリックすると、Phi Silica と呼ばれる最先端の小さな言語モデルが利用されます。 Phi Silica は NPU を活用しており、言語モデルは Copilot+ PC でローカルに実行されます。 Phi Silica は、Copilot+ PC 上の Windows で受信トレイを出荷します。
ユーザーが [テキストをクリック] アクションをクリックすると、選択したテキストと選択したアクションがプロンプトの一部として Phi Silica に送信されます。 Phi Silica は、ユーザーの要求に従って選択したテキストをインテリジェントに書き換え、モデルからの応答をストリームバックします。 Phiシリカは、非常に少ない電力を使用して、迅速かつ効率的に応答を提供します。 詳細については、「 Phi Silica、小型だが強大なオンデバイス SLM」を参照してください。
Phi Silica はローカルで実行されますが、Click to Do のよりインテリジェントなテキスト アクションは、Microsoft のセキュリティで保護されたクラウドの機能を活用して、プロンプトと応答が安全かつ適切であることを確認することで、テキストの結果を向上させます。 テキスト アクションが選択されると、強調表示されたテキストが Microsoft のセキュリティで保護されたクラウドに送信され、このチェックが実行されます。 このデータは、このチェックが完了すると自動的に削除されます。 Click to Do のプライバシーの詳細については、 Microsoft のプライバシーに関する声明を参照してください。
責任ある AI とプライバシーに対する Microsoft の取り組み
責任ある AI」を参照してください。
Microsoft は、2017 年に最初に AI 原則を定義し、その後、責任ある AI Standardを通じてアプローチを運用化して以来、責任を持って AI の進歩に取り組んでいます。 AI システムの開発と展開においては、プライバシーとセキュリティが主要な原則です。 私たちは、お客様が当社の AI 製品を責任を持って使用できるように支援し、当社の学びを共有し、信頼に基づくパートナーシップを構築できるよう取り組んでいます。 責任ある AI への当社の取り組み、当社の指針となる原則、および責任を持った AI テクノロジの開発を保証にするために作成したツールと機能の詳細については、「OCR の透明性に関するメモとユース ケース」を参照してください。
クリックすると、PC の光学式文字認識 (OCR) が使用され、スクリーンショットのテキスト エンティティが検出されます。 OCR の詳細については、「[Do] をクリックすると、Phi Silica という小さな言語モデルが使用されます。 Phi Silica の詳細については、「Windows アプリ SDKでの Phi Silica の概要」を参照してください。 Phi Silica のデプロイを導く責任ある AI 原則と、生成言語モデルを使用する際の安全対策については、「 Windows での責任あるジェネレーティブ AI 開発」を参照してください。
[Do のモデル] をクリックすると、包括的な責任ある AI、セキュリティ、プライバシーの評価と共に公平性評価が行われ、Microsoft の責任ある AI のベスト プラクティスに従いながら、テクノロジが効果的かつ公平であることを確認できます。