A Microsoft apresenta o recurso da barra de tarefas do Windows 11 para compartilhar janelas de aplicativos com o Copilot.

A Microsoft integrou perfeitamente o Copilot à barra de tarefas do Windows 11, um recurso que agora está sendo disponibilizado aos usuários. Basta posicionar o cursor sobre os aplicativos na barra de tarefas para compartilhar a janela do aplicativo com o Copilot. Isso permite suporte interativo, como receber sugestões sobre como responder a e-mails no Outlook. Embora possa parecer trivial, a funcionalidade do Copilot Vision é significativa.

Recentemente, descobri a opção “Compartilhar com o Copilot” no meu PC com Intel Lunar Lake Copilot+.No entanto, esse recurso está sendo disponibilizado para todos os usuários, independentemente de seus PCs serem classificados como sistemas “AI”.Essa inclusão significa que usuários com configurações padrão da AMD ou da Intel também verão a opção “Compartilhar com o Copilot” na barra de tarefas, aumentando ainda mais a acessibilidade.

Entendendo o recurso “Compartilhar com o Copilot”

Durante nossa análise, notamos que o recurso “Compartilhar com o Copilot” aparece ao passar o cursor sobre qualquer aplicativo aberto na barra de tarefas, incluindo serviços como o Cloudflare WARP, um serviço de VPN.É importante ressaltar que até mesmo aplicativos com conteúdo protegido por DRM, como a Netflix, exibem esse recurso, embora as funcionalidades possam não operar como esperado devido a questões de direitos autorais.

Compartilhe com o Copilot na barra de tarefas

Ao compartilhar uma janela de aplicativo, o Copilot utiliza IA baseada em nuvem para analisar o conteúdo exibido e fornecer informações úteis. Por exemplo, quando abri um e-mail no Outlook e compartilhei a janela, o Copilot conseguiu ler o conteúdo, mas não pôde navegar para outros e-mails nem clicar em nada em meu nome.

A Copilot oferece assistência prática no Windows 11.

O Copilot tem limitações de visibilidade; ele só consegue ver o que você vê e, portanto, pode fornecer orientações com base nisso. Quando perguntei como responder a um e-mail, o Copilot me direcionou para localizar um botão “enviar” inexistente, demonstrando uma limitação conhecida como “alucinação”.No entanto, quando solicitado a explicar o processo, a resposta do Copilot melhorou. Ele ativou um cursor virtual, indicando precisamente onde eu precisava clicar.

A Copilot me pede para enviar meu e-mail.

Felizmente, o Copilot tomou medidas corretivas, destacando a opção correta de “responder” na tela em vez do botão “enviar” sugerido. Quando perguntei como excluir o e-mail, ele indicou corretamente a ação apropriada.

Modo de compartilhamento de tela Copilot no Windows 11

A Microsoft se refere a essa função como “assistência guiada”.De acordo com a documentação oficial, o Copilot Vision visa ajudar os usuários de forma eficaz, embora seja importante observar que esse recurso não funciona com conteúdo protegido por DRM ou conteúdo sensível.

Mecanismos por trás da integração do “Compartilhar com o Copiloto”

Conforme relatado pelo Windows Latest, a Microsoft utiliza uma API específica do Windows, projetada para aplicativos de comunicação, para integrar o recurso “Compartilhar com o Copilot” ao Shell do Windows 11, incluindo a barra de tarefas e a interface de compartilhamento. Essa API permite a exibição dos comandos “Iniciar compartilhamento” e “Parar compartilhamento”, passando com precisão o ID da janela selecionado para o aplicativo escolhido.

Essa funcionalidade destina-se principalmente a aplicativos como o Microsoft Teams, mas a Microsoft está ampliando sua aplicação para incluir também o Copilot.É importante ressaltar que essa API não está disponível para uso geral por desenvolvedores; ela é classificada como um Recurso de Acesso Limitado, geralmente exigindo aprovação prévia da Microsoft para acesso e implementação.

Se organizações como a OpenAI desejarem replicar essa funcionalidade, precisarão obter a aprovação da Microsoft para usar a API. Essa exclusividade é o motivo pelo qual vemos atualmente o recurso “Compartilhar com o Copilot” implementado exclusivamente para o Copilot, com a Microsoft tendo a capacidade de fornecer acesso a parceiros selecionados.

Fonte e imagens