Copilot no Windows 11 agora pode analisar sua tela em tempo real!

A Microsoft acaba de iniciar os testes de uma função bem interessante para o Copilot no Windows 11, permitindo que o assistente de IA analise a tela do usuário em tempo real. O novo recurso, chamado Copilot Vision, possibilita compartilhar o desktop inteiro com o assistente, que pode visualizar e conversar sobre o conteúdo exibido na tela, oferecendo um nível de interação nunca antes visto.

Este avanço representa uma evolução significativa na forma como usuários podem interagir com o assistente de inteligência artificial da Microsoft. Anteriormente, a empresa já havia implementado a capacidade de compartilhar aplicativos ou janelas individuais com o Copilot, mas agora expande essa funcionalidade para toda a área de trabalho.

Você também pode gostar dos artigos abaixo:

• Esta IA da Microsoft é capaz de controlar o computador por você
• Microsoft Copilot ou ChatGPT? Saiba por que usuários preferem o ChatGPT

Vale ressaltar que o recurso é completamente opcional e requer ativação explícita pelo usuário. Para utilizar o Copilot Vision, é necessário entrar em um modo especial dentro do aplicativo Copilot. O assistente não monitora automaticamente sua tela em nenhum momento – você precisa compartilhar deliberadamente seu desktop para que a IA possa visualizá-lo.

Segundo a Microsoft, quando você compartilha sua área de trabalho (ou qualquer janela específica de navegador ou aplicativo), o Copilot consegue ver o que você está vendo e conversar sobre isso em tempo real. O assistente pode analisar conteúdos, fornecer insights e responder perguntas, auxiliando em diversas tarefas enquanto você trabalha.

Entre os casos de uso destacados pela empresa estão: obter dicas para melhorar projetos criativos, receber ajuda para aprimorar seu currículo ou orientações enquanto navega em um novo jogo. A interface do Copilot Vision flutua logo acima da barra de tarefas durante o compartilhamento de tela, proporcionando fácil acesso.

O Copilot Vision transforma o aplicativo em uma ferramenta genuinamente útil, funcionando como um verdadeiro copiloto. É possível usar linguagem natural para conversar com o assistente enquanto ele visualiza sua tela, permitindo abordar diferentes tópicos conforme você alterna entre aplicativos e janelas.

Limitações e futuro do recurso

Por enquanto, o Copilot não consegue manipular diretamente seu desktop para executar tarefas. Em vez disso, o assistente pode destacar áreas da tela onde você deve clicar quando solicita ajuda para realizar alguma atividade. Se você não souber como utilizar determinado aplicativo, o Copilot Vision pode guiá-lo passo a passo na conclusão da tarefa desejada.

Este lançamento faz parte de uma série de novidades anunciadas pela Microsoft para o Copilot este ano. Entre elas está o Copilot Memory, que permite ao assistente criar um perfil sobre você e transportar essas informações entre dispositivos, aprendendo seus hábitos, gostos e preferências.

A empresa também revelou que o Copilot eventualmente terá uma persona personalizável, permitindo que os usuários criem um personagem com quem possam conversar através do aplicativo. A Microsoft sugeriu que talvez seja possível até mesmo fazer o Copilot se parecer com o Clippy, o icônico assistente dos primeiros Office.

No ano passado, a Microsoft lançou uma atualização importante para o aplicativo Copilot, redesenhando a interface do usuário e entregando um aplicativo nativo para Windows 11, em vez de uma versão baseada na web. Desde então, a empresa tem adicionado gradualmente novos recursos, incluindo Copilot Pages, pesquisa aprofundada e mais.

O teste do compartilhamento de desktop com o Copilot no Windows 11 já está disponível em todos os canais do Windows Insider Preview, incluindo Release Preview, Beta, Dev e Canary. A atualização pode ser obtida através da Microsoft Store, mas provavelmente será distribuída em ondas, o que significa que você pode não vê-la imediatamente no aplicativo.

É importante destacar que o Copilot Vision está disponível apenas nos Estados Unidos por enquanto, e o compartilhamento de desktop com o Copilot está sujeito à mesma restrição regional. Isso significa que usuários brasileiros e de outros mercados que ainda não têm acesso ao Copilot Vision não poderão testar o compartilhamento de desktop com o assistente neste momento.

Fonte: Windows Central