Функція "Click to Do" (попередній перегляд) допомагає швидше виконувати завдання, визначаючи текст і зображення на екрані, з якими можна виконувати дії. Клацніть, щоб виконати аналіз вмісту на екрані, а потім ви можете вибрати текст або зображення, з яким потрібно вжити заходів.
Аналіз цього знімка екрана завжди виконується локально на вашому пристрої. Аналіз починається лише після активної взаємодії з функцією "Click to Do" і завершується після виходу з кнопки "Click to Do". За допомогою кнопки "Виконати" можна визначати лише текст і зображення, а не вміст цих текстів і зображень. Вона не аналізує вміст у, наприклад, згорнутих програмах, яких немає на екрані.
Спільний доступ до вмісту надається, лише якщо ви вирішите виконати такі дії, як Пошук в Інтернеті. Ви помітите, що коли кнопка "Click to Do" активна, курсор стане синім і білим. Курсор також змінює фігуру залежно від типу інформації під нею. Що можна робити зі змінами відомостей залежно від типу вмісту, який виявляє функція Click to Do.
Примітка.: Функція "Click to Do" тепер доступна в підготовчій версії для ПК Copilot+ за програмою оцінювання Windows. Докладні відомості див. в статті Попередній перегляд інших можливостей Copilot+ з оцінювачами Windows у каналі Dev.
Вимоги до системи
Copilot+ PC з увімкненим Пригадування
-
Не потрібно зберігати знімки для Пригадування використання функції "Click to Do"
Більш розумні текстові дії доступні лише на комп'ютерах Copilot+ на базі Snapdragon, коли ваша мова має англійську мову з підтримкою AMD та комп'ютерів Copilot+ на базі Intel, що з'явились найближчим часом.
Функція "Click to Do" робить більше з текстом
Під час виділення тексту за допомогою команди "Click to Do" доступні такі параметри:
-
Копіювання: копіювання виділеного тексту до буфера обміну.
-
Відкрити за допомогою. Відкриває виділений текст у текстовому редакторі, наприклад Блокноті.
-
Пошук в Інтернеті. Пошук виділеного тексту за допомогою браузера та засобу пошукуза замовчуванням.
Інтелектуальніші текстові дії доступні, якщо мовою за замовчуванням вибрано англійську мову, вибрано принаймні 10 слів і ви ввійшли за допомогою облікового запису Microsoft або Microsoft Entra облікового запису. Інтелектуальні текстові дії на живлення від малої мовної моделі Phi Silica та NPU включають:
-
Підсумовування: коротко окреслює основні точки виділеного тексту
-
Переписати (казуальний): змінення виділеного тексту за допомогою випадкового тону
-
Переписати (формальний): змінення виділеного тексту за допомогою формального тону
-
Уточнення: змінення виділеного тексту, що робить граматичні покращення
Якщо виділений текст – це адреса електронної пошти, можна скопіювати його або надіслати повідомлення електронної пошти.
-
Надіслати повідомлення електронної пошти. Використовує стандартну програму електронної пошти, щоб відкрити нове повідомлення на вибрану адресу електронної пошти
Якщо виділений текст – це веб-сайт, можна скопіювати текст або відкрити веб-сайт.
-
Відкрити веб-сайт: відкриття вибраного веб-сайту в стандартному браузері
Функція "Click to Do" робить більше із зображеннями
Якщо ви виберете зображення, ви маєте такі параметри:
-
Копіювання: копіювання зображення до буфера обміну
-
Зберегти як: збереження зображення в указаному розташуванні
-
Спільний доступ. Відкриття параметра надання спільного доступу до файлів для файлу зображення
-
Відкрити за допомогою. Відкрийте зображення за допомогою такої програми, як "Фотографії", "Засіб захоплення фрагментів" або "Paint"
-
Візуальний пошук за допомогою Bing: візуальний пошук за допомогою Bing за допомогою браузера за замовчуванням
-
Розмиття фону за допомогою програми "Фотографії": розмиття фону за допомогою програми "Фотографії"
-
Видалення об'єктів за допомогою програми "Фотографії": видалення небажаних об'єктів на зображенні за допомогою програми "Фотографії"
-
Видалення фону з функцією Paint. Видалення фону зображення за допомогою програми Paint
Порада.: Якщо варіанти Фотографії Microsoft або Paint не відображаються, переконайтеся, що на комп'ютері інстальовано найновішу версію програми з Microsoft Store.
Використання функції "Click to Do"
Просто натисніть клавішу з емблемою Windows + клацання мишею або клавішу з емблемою Windows + Q , щоб ввести Click to Do і вжити заходів щодо того, що ви клацали. Крім того, якщо інстальовано засіб захоплення фрагментів, можна ввести команду "Click to Do" (Засіб захоплення фрагментів). За потреби можна також знайти команду "Click to Do " у Windows Search , щоб вибрати та виконати дії, що відображаються.
Click to Do privacy considerations
Якщо ви вирішите надіслати відомості з програми "Click to Do" до програми, наприклад Paint, команда "Click to Do" тимчасово збереже ці відомості, щоб завершити передавання. За допомогою кнопки "Виконати" створюється тимчасовий файл у такому розташуванні:
-
C:\Users\{username}\AppData\Local\Temp
Тимчасові файли також можуть бути збережені, коли ви виберете надіслати відгук. Ці тимчасові файли не зберігаються в довгостроковій перспективі. Функція "Click to Do" не зберігає вміст із екрана після виконання запитаної дії, але деякі діагностичні дані збираються, щоб забезпечити захист, актуальність і роботу служби "Click to Do".
Розумніші дії з текстом "Click to Do", зокрема Summarize, Rewrite (Casual), Rewrite (Formal) і Refine, працюють на короткій мовній моделі під назвою Phi Silica. Phi Silica використовує NPU, а мовна модель працює локально на ПК Copilot+ Phi Silica постачає поштову скриньку з Windows на ПК з Copilot+.
Коли користувач натискає кнопку Дії з текстом "Клацніть, щоб виконати", виділений текст і вибрана дія надсилаються до Phi Silica в рамках запиту. Phi Silica розумно перезаписує вибраний текст відповідно до запиту користувача та повертає відповідь моделі. Phi Silica надає відповіді швидко і ефективно, використовуючи дуже мало енергії. Докладні відомості див. в статті Пхі Силіка (small, але mighty on-device SLM).
Хоча Phi Silica працює локально, розумніші текстові дії технології Click to Do також використовують надійну хмару Microsoft, щоб покращувати ваші текстові результати, забезпечуючи безпеку й відповіді. Коли виділено текстову дію, виділений текст надсилається до захищеної хмари Microsoft для виконання цієї перевірки. Після завершення перевірки ці дані видаляються автоматично. Докладні відомості про конфіденційність для статті Click to Do див. в Декларації корпорації Майкрософт про конфіденційність.
Зобов’язання корпорації Майкрософт щодо відповідального за ШІ й конфіденційності
Корпорація Майкрософт працює над відповідальним просуванням ШІ з 2017 року, коли ми вперше визначили наші принципи ШІ, а потім функціонували наш підхід через Standard відповідального ШІ. Конфіденційність і безпека – це базові принципи розробки й розгортання систем ШІ. Ми працюємо над тим, щоб допомогти нашим клієнтам відповідально використовувати наші продукти на основі ШІ, ділитися своїми навчальними здобутками й будувати довірливі партнерські відносини. Докладні відомості про нашу роботу над відповідальним ШІ, принципи, якими ми керуємося, а також інструменти й можливості, які ми створили, щоб забезпечити відповідальну розробку технології ШІ, див. у статті Відповідальний ШІ.
Функція "Click to Do" використовує оптичне розпізнавання символів (OCR) на ПК для виявлення текстових сутностей на знімках екрана. Докладні відомості про OCR див. у статті Про прозорість та випадки використання OCR.
У розумних текстових діях "Click to Do" використовується невелика мовна модель під назвою Phi Silica. Докладні відомості про Phi Silica див. в статті Початок роботи з phi Silica в Windows App SDK. Відомості про відповідальні принципи AI, які керують розгортанням Phi Silica та заходами безпеки під час використання генеративних мовних моделей, див. в статті Відповідальна розробка генеративного ШІ у Windows.
Моделі Click to Do пройшли оцінку справедливості, поряд з комплексними відповідальними оцінками AI, безпеки та конфіденційності, щоб переконатися, що ця технологія ефективна та справедлива, дотримуючись практичних порад корпорації Майкрософт щодо відповідального ШІ.
