O Copilot Vision da Microsoft analisa sua tela para obter assistência de IA aprimorada

Hoje, a Microsoft apresentou um recurso inovador chamado Copilot Vision como parte de seus novos Copilot Labs . Esta iniciativa permite que a Microsoft teste novas funcionalidades de IA com um grupo limitado de usuários para coletar feedback valioso e aprimorar os recursos. O Copilot Vision tem semelhanças com os recursos de vídeo demonstrados pela OpenAI no início deste ano , oferecendo aos usuários assistência em tempo real adaptada ao conteúdo exibido em suas telas.

Atualmente, o Copilot Vision está disponível exclusivamente no Microsoft Edge . Uma vez ativado, os usuários que visitam sites suportados podem interagir com o Copilot fazendo perguntas relacionadas ao conteúdo da página em tempo real. O recurso não só auxilia a responder a consultas, mas também pode sugerir ações subsequentes para ajudar com tarefas em andamento. A capacidade de falar suas consultas naturalmente, em vez de digitar, faz com que pareça que um especialista está sentado ao seu lado, oferecendo ajuda enquanto você navega.

A Microsoft projetou o Copilot Vision com uma forte ênfase na privacidade . Esse recurso opera inteiramente em uma base opt-in, o que significa que ele só é habilitado quando os usuários optam especificamente por ele. É importante ressaltar que a Microsoft garante aos usuários que nenhum dado — incluindo áudio, imagens, texto ou conversas do Copilot Vision — é armazenado ou utilizado para treinamento de modelos. Após a conclusão da sua sessão do Vision , todos os dados associados são permanentemente apagados.

Além disso, o Copilot Vision não é aplicável em sites que apresentam paywalls ou conteúdo sensível. Durante esse estágio preliminar, a Microsoft restringiu o Copilot Vision a uma lista selecionada de sites pré-aprovados, com planos de ampliar sua disponibilidade no futuro, sempre priorizando a segurança e a responsabilidade do usuário.

É crucial esclarecer que o Copilot Vision não atua como um agente; ele não pode executar ações em seu nome. Em vez disso, ele funciona como um companheiro útil, respondendo a perguntas durante sua jornada de navegação.

O Copilot Vision está sendo implementado para um grupo seleto de usuários do Copilot Pro nos Estados Unidos. Esse recurso tem o potencial de transformar a maneira como interagimos com a web, criando uma experiência de navegação mais intuitiva e com suporte. À medida que a Microsoft desenvolve e expande ainda mais esse recurso revolucionário, podemos antecipar uma experiência Copilot ainda mais eficaz em um futuro próximo.

Fonte