Microsoft ogłosił aktualizację Fall Moments dla swojego systemu operacyjnego Windows 11, wprowadzającą zestaw funkcji mających na celu zintegrowanie możliwości sztucznej inteligencji z każdym obsługiwanym komputerem osobistym. Aktualizacja koncentruje się na dwóch głównych dodatkach: Copilot Voice i Copilot Vision, które wspólnie tworzą bardziej interaktywne środowisko sztucznej inteligencji dla użytkowników. Pierwsza funkcja, Copilot Voice, umożliwia użytkownikom interakcję z komputerem za pomocą poleceń głosowych i naturalnej rozmowy, co jest metodą interakcji podobną do tej stosowanej w innych konwersacyjnych narzędziach sztucznej inteligencji. Drugą podstawową funkcją jest Copilot Vision, która pozwala komputerowi postrzegać i interpretować otoczenie za pomocą kamery. Copilot Vision może także analizować treść wyświetlaną na ekranie użytkownika, umożliwiając mu zrozumienie kontekstu i wykonywanie działań na podstawie tego, co „widzi”. W ramach tej aktualizacji asystenta AI można aktywować głosowo, używając zwrotu „Hej, drugi pilot”. Po aktywacji użytkownicy mogą zadawać pytania, wyszukiwać informacje czy kierować asystentem do wykonania określonych zadań. Funkcja Copilot Vision umożliwia użytkownikom udostępnianie komputerów stacjonarnych lub poszczególnych aplikacji bezpośrednio sztucznej inteligencji. W zamian Copilot może zapewnić spostrzeżenia lub odpowiedzieć na pytania związane z treścią na ekranie. Aktualizacja wprowadza także funkcję wskazówek, którą Microsoft nazywa „Najciekawszymi”. Narzędzie to zostało zaprojektowane, aby pomóc użytkownikom niezaznajomionym z niektórymi operacjami na komputerze. Wskazując obszar na ekranie i prosząc o pomoc, użytkownicy mogą otrzymać od sztucznej inteligencji instrukcje krok po kroku dotyczące wykonania zadania. Firma Microsoft zauważyła, że ta funkcja jest przeznaczona szczególnie dla użytkowników o niższym poziomie znajomości technologii. Funkcja Najważniejsze informacje jest dostępna w systemie operacyjnym i w określonych aplikacjach. W połączeniu z tymi funkcjami interfejs pisania Copilot został przeprojektowany i zintegrowany bezpośrednio z paskiem zadań systemu Windows 11. Ta zmiana ma na celu zwiększenie dostępności interakcji tekstowej z asystentem AI. W pakiecie aplikacji Microsoft 365, który obejmuje programy PowerPoint, Excel i Word, funkcja Copilot Vision została udoskonalona, aby umożliwić zrozumienie pełnego kontekstu pracy użytkownika. Za wyraźną zgodą użytkownika sztuczna inteligencja może wyświetlić ekran i zaoferować pomoc w zadaniach takich jak projektowanie prezentacji lub analizowanie danych z arkusza kalkulacyjnego. Firma Microsoft rozwija także funkcję Copilot Actions, która umożliwia inteligentnemu agentowi wykonywanie wieloetapowych zadań za użytkownika. Wcześniej ograniczona do działań opartych na przeglądarce, takich jak rezerwacja hotelu lub wyszukiwanie lotów, ta funkcja została teraz rozszerzona na program Windows 11 Insiders. Rozszerzenie umożliwia działanie Copilot Actions w ramach lokalnego systemu operacyjnego, wykonywanie zadań w Eksploratorze plików lub wyszukiwanie plików na komputerze. Użytkownicy mogą opisać pożądany wynik, a sztuczna inteligencja będzie pracować nad jego wykonaniem. Łączy się to z szerszą inicjatywą Microsoftu mającą na celu połączenie sztucznej inteligencji z usługami takimi jak OneDrive i platformami zewnętrznymi, takimi jak Google Gmail, z możliwością eksportowania wyników zadań do innych aplikacji. Dodatkowo Microsoft ogłosił współpracę z narzędziem do obsługi zadań Manus. To partnerstwo umożliwi narzędziu wykonywanie złożonych operacji na plikach lokalnych użytkownika, zależnie od otrzymania pozwolenia. Podstawą techniczną tej współpracy jest wspólna infrastruktura zbudowana przez spółkę-matkę Microsoft i Manus, zewnętrzną firmę z siedzibą w Szanghaju, wykorzystującą serwery Azure wzbogacone o możliwości sztucznej inteligencji. Aby zadbać o bezpieczeństwo i prywatność, aktualizacja obejmuje nowe poziomy kontroli określane jako „ogrodzenia bezpieczeństwa”. Microsoft twierdzi, że użytkownicy będą mieli pełną kontrolę nad nowymi funkcjami i będą mogli w dowolnym momencie wyłączyć lub zawiesić akcje Copilot. Firma zobowiązuje się także do zapewnienia użytkownikom pełnej przejrzystości działań AI, wraz z aktualizacjami na każdym etapie zadania. Odnosząc się do wniosków płynących z niedawnego „fiaska wycofania produktów”, Microsoft zapewnia, że stale przeprowadza kompleksowe kontrole i zbiera opinie organizacji, aby ulepszyć swoje mechanizmy bezpieczeństwa i prywatności.
Source: Microsoft wprowadza „Copilot Voice” i „Copilot Vision” w systemie Windows 11
