Kliknięcie w celu wykonania (podgląd) ułatwia szybsze wykonywanie zadań przez identyfikowanie tekstu i obrazów na ekranie, za pomocą których można wykonywać akcje. Kliknij pozycję Do, aby przeanalizować zawartość ekranu, a następnie możesz wybrać tekst lub obraz, na których chcesz wykonać akcję.
Analiza tego zrzutu ekranu jest zawsze wykonywana lokalnie na urządzeniu. Analiza rozpoczyna się dopiero po aktywnym nawiązaniu przez Ciebie angażowania się w działanie aplikacji Click to Do i kończy się po zakończeniu działania funkcji Kliknij, aby zrobić. Kliknij pozycję Do, aby zidentyfikować tylko tekst i obrazy, a nie zawartość tych tekstów lub obrazów. Nie analizuje żadnej zawartości, na przykład w zminimalizowanych aplikacjach, które nie znajdują się na ekranie.
Zawartość jest udostępniana tylko wtedy, gdy użytkownik zdecyduje się wykonać akcję, taką jak Wyszukaj w sieci Web. Po aktywnym kliknięciu w celu wykonania kursor będzie niebieski i biały. Kursor zmienia również kształt w zależności od typu informacji pod nim. Co można zrobić, gdy informacje są zmieniane w zależności od tego, jakiego rodzaju zawartość jest wykrywana przez kliknięcie w celu wykonania.
Uwaga: Aplikacja Click to Do jest teraz dostępna w wersji zapoznawczej dla komputerów z systemem Copilot+ w ramach Niejawnego programu testów systemu Windows. Aby uzyskać więcej informacji, zobaczWyświetlanie podglądu dodatkowych rozwiązań Copilot+ z niejawnymi testerami systemu Windows w kanale deweloperów.
Wymagania systemowe
A Copilot+ PC that has Przypomnienie enabled
-
Nie musisz zapisywać migawek, aby Przypomnienie używać funkcji Click to Do
Bardziej inteligentne akcje tekstowe są dostępne tylko na komputerach z procesorem Copilot+ z procesorem Snapdragon już dziś, gdy twój język jest ustawiony na angielski z obsługą amd i komputerów z procesorem Intel Copilot+ już wkrótce.
Kliknij, aby zrobić więcej z tekstem
Po wyróżnieniu tekstu kliknięciem w celu wykonania są dostępne następujące opcje:
-
Kopiuj: kopiuje zaznaczony tekst do schowka.
-
Otwórz za pomocą: otwiera zaznaczony tekst w edytorze tekstów, takim jak Notatnik.
-
Wyszukiwanie w Internecie: umożliwia wyszukiwanie zaznaczonego tekstu przy użyciu domyślnej przeglądarki i wyszukiwarki.
Bardziej inteligentne akcje tekstowe są dostępne, gdy język domyślny jest ustawiony na angielski, zaznaczono co najmniej 10 wyrazów i zalogowano się za pomocą konta Microsoft lub konta Microsoft Entra. Inteligentne akcje tekstowe obsługiwane przez model Phi Silica w małym języku i NPU obejmują:
-
Podsumowanie: Krótkie przedstawienie głównych punktów zaznaczonego tekstu
-
Rewrite (Casual): poprawia zaznaczony tekst, używając swobodnego tonu
-
Ponowne pisanie (formalne): poprawia zaznaczony tekst przy użyciu formalnego tonu
-
Uściślanie: poprawia zaznaczony tekst, wprowadzając ulepszenia gramatyczne
Jeśli wyróżniony tekst jest adresem e-mail, możesz skopiować tekst lub wysłać wiadomość e-mail.
-
Wysyłanie wiadomości e-mail: używa domyślnej aplikacji poczty e-mail do otwierania nowej wiadomości e-mail na wybrany adres e-mail
Gdy wyróżniony tekst jest witryną internetową, możesz skopiować tekst lub otworzyć witrynę sieci Web.
-
Otwieranie witryny sieci Web: otwiera wybraną witrynę sieci Web w przeglądarce domyślnej
Kliknięcie w celu wykonania dodatkowych czynności z obrazami
Jeśli wybierzesz obraz, masz następujące opcje:
-
Kopiowanie: kopiuje obraz do schowka
-
Zapisz jako: Zapisz obraz w określonej lokalizacji
-
Udostępnianie: otwiera opcję udostępniania plików dla pliku obrazu
-
Otwórz za pomocą: Otwórz obraz za pomocą aplikacji, takiej jak Zdjęcia, Narzędzie Wycinanie lub Paint
-
Wyszukiwanie wizualne za pomocą usługi Bing: przeprowadza wyszukiwanie wizualne za pomocą usługi Bing przy użyciu domyślnej przeglądarki internetowej
-
Rozmyj tło za pomocą aplikacji Zdjęcia: Rozmyj tło za pomocą aplikacji Zdjęcia
-
Wymazywanie obiektów za pomocą aplikacji Zdjęcia: wymazywanie niechcianych obiektów na obrazie za pomocą aplikacji Zdjęcia
-
Usuwanie tła za pomocą funkcji Bólt: Usuwanie tła obrazu za pomocą programu Paint
Porada: Jeśli nie widzisz opcji aplikacji Zdjęcia Microsoft lub Paint, upewnij się, że masz zainstalowaną najnowszą wersję aplikacji ze sklepu Microsoft Store.
Jak używać aplikacji Click to Do
Wystarczy użyć logo Windows + kliknięcie myszą lub z logo systemu Windows + Q, aby wprowadzić polecenie Kliknij, aby zrobić i podjąć akcje na klikniętych elementach. Jeśli jest zainstalowane narzędzie Wycinanie, możesz również wprowadzić polecenie Kliknij, aby zrobić to za pomocą menu Narzędzie Wycinanie. Jeśli kiedykolwiek zajdzie taka potrzeba, możesz również wyszukać polecenie Kliknij w celu wykonania w usłudze Windows Search , aby wybrać i podjąć akcje dotyczące tego, co widzisz.
Kliknij, aby uwzględnić kwestie dotyczące prywatności
Jeśli zdecydujesz się na wysłanie informacji z opcji Kliknij, aby zrobić do aplikacji, takiej jak Paint, kliknięcie w celu wykonania transferu spowoduje tymczasowe zapisanie tych informacji. Kliknięcie przycisku Do spowoduje utworzenie pliku tymczasowego w następującej lokalizacji:
-
C:\Użytkownicy\{nazwa_użytkownika}\AppData\Local\Temp
Pliki tymczasowe mogą być również zapisywane po wybraniu pozycji Wyślij opinię. Te pliki tymczasowe nie są zapisywane przez dłuższy czas. Po zakończeniu wymaganej akcji kliknięcie w celu wykonania zadania nie powoduje zachowania żadnej zawartości z ekranu, ale są zbierane niektóre dane diagnostyczne , dzięki którym kliknięcie w celu wykonania jest bezpieczne, aktualne i działa.
Kliknij, aby zrobić bardziej inteligentne akcje tekstowe, w tym Summarize, Rewrite (Casual), Rewrite (Formal) i Refine, są obsługiwane przez najnowocześniejszy model małej wersji językowej o nazwie Phi Silica. Phi Silica wykorzystuje NPU, a model językowy działa lokalnie na komputerach Copilot+. Phi Silica dostarcza skrzynkę odbiorczą z systemem Windows na komputerach Copilot+.
Gdy użytkownik kliknie akcje tekstowe Kliknij, aby zrobić, zaznaczony tekst i wybrana akcja są wysyłane do Phi Silica w ramach monitu. Phi Silica inteligentnie przepisuje zaznaczony tekst zgodnie z żądaniem użytkownika i przesyła z powrotem odpowiedź z modelu. Krzemionka Phi zapewnia szybkie i wydajne odpowiedzi, przy bardzo małej mocy. Aby uzyskać więcej informacji, zobacz Phi Silica, small but mighty on-device SLM.
Podczas gdy Phi Silica działa lokalnie, bardziej inteligentne akcje tekstowe Click to Do wykorzystują również możliwości bezpiecznej chmury firmy Microsoft, aby ulepszyć wyniki tekstowe, zapewniając bezpieczeństwo i właściwe monity oraz odpowiedzi. Po zaznaczeniu akcji tekstowej wyróżniony tekst jest wysyłany do bezpiecznej chmury firmy Microsoft w celu sprawdzenia tego. Te dane są usuwane automatycznie po zakończeniu tego sprawdzania. Aby uzyskać więcej informacji na temat prywatności w przypadku aplikacji Click to Do, zobacz Oświadczenie o ochronie prywatności firmy Microsoft.
Zobowiązanie firmy Microsoft do odpowiedzialnej sztucznej inteligencji
Firma Microsoft pracuje nad odpowiedzialnym rozwojem SI od 2017 r., kiedy to po raz pierwszy zdefiniowaliśmy nasze zasady AI, a później wyeksponowaliśmy nasze podejście za pośrednictwem odpowiedzialnego standardu AI Standard. Prywatność i bezpieczeństwo to podstawowe zasady, którymi kierujemy się podczas opracowywania i wdrażania systemów sztucznej inteligencji. Pomagamy naszym klientom w odpowiedzialnym korzystaniu z naszych produktów sztucznej inteligencji, udostępnianiu naszych doświadczeń i tworzeniu relacji partnerskich opartych na zaufaniu. Więcej informacji na temat naszych wysiłków w zakresie odpowiedzialnej sztucznej inteligencji, zasad, którymi się kierujemy, oraz narzędzi i możliwości, które stworzyliśmy, aby zapewnić, że rozwijamy technologię AI w sposób odpowiedzialny, znajdziesz w sekcji Odpowiedzialna sztuczna inteligencja.
Kliknięcie w celu wykonania używa optycznego rozpoznawania znaków (OCR) na komputerze do wykrywania obiektów tekstowych na zrzutach ekranu. Więcej informacji na temat funkcji OCR znajdziesz w sekcji Uwaga dotycząca przejrzystości i przypadków użycia funkcji OCR.
W inteligentnych akcjach tekstowych aplikacji Click to Do jest używany mały model języka o nazwie Phi Silica. Aby uzyskać więcej informacji na temat Krzemionki Phi, zobacz Rozpoczynanie pracy z krzemionką Phi w Windows App SDK. Aby uzyskać informacje na temat zasad odpowiedzialnej AI kierujących wdrożeniem Phi Silica oraz środków bezpieczeństwa obowiązujących podczas korzystania z modeli języków generowania, zobacz Odpowiedzialna generowanie rozwoju SI w systemie Windows.
Modele Click to Do zostały poddane testom uczciwości, wraz z kompleksowymi odpowiedzialnymi ocenami AI, bezpieczeństwa i prywatności, aby upewnić się, że technologia ta jest skuteczna i sprawiedliwa, przestrzegając najlepszych praktyk firmy Microsoft dotyczących odpowiedzialnej SI.
