Microsoft zaczął testować z Windows Insiderami na Windows 11 nową funkcjonalność Copilot Vision oraz wprowadził do aplikacji Copilota polecenie głosowe, które pozwala łatwo wywołać asystenta - niczym kiedyś Cortanę, a także innych asystentów AI.
Nowe funkcje Copilot Vision na Windows 11
Copilot Vision to narzędzie wykorzystujące sztuczną inteligencję, aby pomagać użytkownikom Windows 11 w wykonywaniu zadań, analizując zawartość na ekranie i dostarczając niezbędną pomoc. Copilot Vision "widzi" i rozumie to, co dzieje się na ekranie oraz jaki jest tego kontekst. Możesz zadawać mu pytania np. o otwartej stronie internetowej, a dostarczy dodatkowe informacje. Teraz jego funkcjonalność rozszerza się za sprawą dwóch nowości, dostępnych już dla Insiderów.
Po pierwsze, możesz teraz udostępnić okno Ustawień albo aplikacji Clipchamp i poprosić Copilota, aby coś w nich zrobił. Kiedy udostępniasz pojedyncze okno przeglądarki lub aplikacji, używając Copilot Vision, Copilot może prowadzić, nawigować i instruować Cię, jak wykonać konkretne zadanie, przy użyciu wskazówek wizualnych. Zwyczajnie poproś Copilota 'Pokaż mi, jak', a Copilot wskaże, gdzie kliknąć w udostępnionej przeglądarce lub aplikacji, aby wykonać zadanie. Dziś funkcja Highlights działa w pojedynczej aplikacji. Naciśnij przycisk 'stop', aby zatrzymać te zaznaczenia Copilota i wrócić do normalnej sesji Vision – wyjaśnia Microsoft.
Po drugie, Copilot Vision obsługuje teraz udostępnianie do dwóch aplikacji jednocześnie. Copilot może pomóc w analizie, dostarczy spostrzeżenia i odpowie na Twoje pytania w udostępnionych aplikacjach. Przykładowo udostępnij aplikację z listą rzeczy do spakowania na wyprawę backpackerską oraz aplikację z listą online, a następnie zapytaj Copilota, "czy na mojej liście rzeczy do spakowania czegoś brakuje w porównaniu z listą online?" – czytamy na blogu Microsoft. Obie powyższe funkcje wprowadza aktualizacja apki Microsoft Copilot (wersja 1.25044.92.0 do pobrania z Microsoft Store), udostępniana we wszystkich kanałach Windows Insider.
"Hej, Copilot" czyli jak wywołać asystenta AI
Microsoft wprowadza także nową funkcję głosową - polecenie, za pomocą którego wybudzimy asystenta. Ta magiczna fraza brzmi "Hey, Copilot!". Przywodzi to na myśl słynne niegdyś "Hej, Cortana!" z czasów, gdy asystentka poprzedniej generacji brylowała w Windows 10. Jest to funkcja opcjonalna, dająca nowy sposób rozpoczęcia konwersacji z Copilot Voice, gdy tylko ta funkcja jest włączona, a komputer jest odblokowany.
Aby móc z tego korzystać, musisz wcześniej włączyć "Hej, Copilot" w ustawieniach aplikacji Microsoft Copilot. Po prostu wypowiedz polecenie do mikrofonu, a następnie zadaj jakieś pytanie. Zobaczysz, jak na ekranie pojawia się ikona mikrofonu, co oznacza, że asystent AI Cię teraz słucha. Aby zakończyć, kliknij "X", a połączenie zostanie przerwane. Wydarzy się to również automatycznie po kilku sekundach ciszy, jeśli nie wykonasz żadnej interakcji. Usłyszysz sygnał dźwiękowy potwierdzający zakończenie rozmowy.
Skąd wiadomo, kiedy Copilot czeka na polecenie uruchamiające, a kiedy słucha wszystkiego w ramach rozmowy głosowej? Na ten ostatni tryb wskazuje wyświetlenie się interfejsu Copilot Voice. Gdy jest on wyłączony, sygnał dźwiękowy z mikrofonu nie jest wysyłany do chmury.
Ta funkcja zaczęła być wprowadzana do aplikacji Microsoft Copilot (wersja 1.25051.10.0 do pobrania z Microsoft Store) we wszystkich kanałach Windows Insider na Windows 11.