Microsoft ha integrato perfettamente Copilot nella barra delle applicazioni di Windows 11, una funzionalità che è ora disponibile per gli utenti. Semplicemente passando il mouse sulle app nella barra delle applicazioni, è possibile condividere la finestra dell’applicazione con Copilot. Questo consente un supporto interattivo, ad esempio la ricezione di suggerimenti su come rispondere alle email in Outlook. Anche se può sembrare banale, la funzionalità alla base di Copilot Vision è significativa.
Di recente ho scoperto l’opzione “Condividi con Copilot” sul mio PC Intel Lunar Lake Copilot+.Tuttavia, questa funzionalità è stata resa disponibile a tutti gli utenti, indipendentemente dal fatto che i loro PC siano classificati come sistemi “AI”.Questa inclusività significa che anche gli utenti con configurazioni AMD o Intel standard vedranno l’opzione “Condividi con Copilot” sulla barra delle applicazioni, migliorando ulteriormente l’accessibilità.
Informazioni sulla funzione “Condividi con Copilot”
Durante la nostra analisi, abbiamo notato che la funzione “Condividi con Copilot” appare quando si passa il mouse su qualsiasi applicazione aperta nella barra delle applicazioni, comprese quelle come Cloudflare WARP, un servizio VPN. In particolare, anche le applicazioni con contenuti protetti da DRM, come Netflix, mostrano questa funzione, sebbene alcune funzionalità potrebbero non funzionare come previsto per motivi di copyright.
Condividendo una finestra di un’applicazione, Copilot utilizza l’intelligenza artificiale basata sul cloud per analizzare il contenuto visualizzato e fornire informazioni utili. Ad esempio, quando ho aperto un’e-mail in Outlook e ho condiviso la finestra, Copilot è riuscito a leggerne il contenuto, ma non è riuscito a navigare verso altre e-mail o a fare clic per conto mio.
Copilot è limitato dalla visibilità; può vedere solo ciò che vedi tu e quindi può fornire indicazioni basate su questo. Quando ho chiesto come rispondere a un’e-mail, Copilot mi ha indicato un pulsante “Invia” inesistente, dimostrando una limitazione nota come “allucinazione”.Tuttavia, quando gli ho chiesto di spiegare il processo, la risposta di Copilot è migliorata. Ha attivato un cursore virtuale, indicandomi esattamente dove dovevo cliccare.
Fortunatamente, Copilot ha adottato misure correttive evidenziando sullo schermo l’opzione corretta “Rispondi” anziché il pulsante “Invia” suggerito. Quando ho chiesto come eliminare l’email, ha individuato correttamente l’azione appropriata.
Microsoft definisce questa funzione come “assistenza guidata”.Secondo la documentazione ufficiale, Copilot Vision mira ad aiutare gli utenti in modo efficace, anche se si precisa che questa funzionalità non funziona con contenuti protetti da DRM o sensibili.
Meccanismi alla base dell’integrazione di “Condividi con Copilota”
Come riportato da Windows Latest, Microsoft utilizza una specifica API di Windows progettata per le applicazioni di comunicazione per integrare la funzionalità “Condividi con Copilot” nella Shell di Windows 11, che include la barra delle applicazioni e l’interfaccia utente di condivisione. Questa API consente la visualizzazione dei comandi “Avvia condivisione” e “Interrompi condivisione”, trasmettendo correttamente il WindowId selezionato all’app scelta.
Questa funzionalità è pensata principalmente per applicazioni come Microsoft Teams, ma Microsoft sta ampliando la sua applicazione per integrare anche Copilot.È importante sottolineare che questa API non è disponibile per l’uso generico da parte degli sviluppatori; è etichettata come funzionalità ad accesso limitato, che in genere richiede l’approvazione preventiva di Microsoft per l’accesso e l’implementazione.
Se organizzazioni come OpenAI desiderano replicare questa funzionalità, dovranno ottenere l’approvazione di Microsoft per utilizzare l’API. Questa esclusività è il motivo per cui attualmente la funzionalità “Condividi con Copilot” è implementata esclusivamente per Copilot, con Microsoft che ha la possibilità di fornire l’accesso a partner selezionati.