Copilot Vision facilita leitura de tela com assistente de inteligência artificial

O Copilot Vision, nova funcionalidade do Microsoft Copilot, permite que usuários interajam com conteúdo visual em suas telas. Disponível gratuitamente em dispositivos Windows, Android e iOS, a ferramenta combina visão computacional e inteligência artificial para oferecer assistência interativa.

Com o Copilot Vision, o software "enxerga" a tela do usuário, analisando imagens, sites e vídeos. Ele responde a perguntas e fornece insights sobre o conteúdo em destaque. O recurso é acessível no navegador Microsoft Edge e em dispositivos móveis, facilitando tarefas do dia a dia.

Funcionalidades do Copilot Vision

O Copilot Vision utiliza modelos de inteligência artificial multimodal, permitindo que usuários interajam com fotos, capturas de tela e elementos de páginas da web. Com comandos de texto ou voz, é possível obter informações detalhadas sobre o que está sendo exibido. A ferramenta pode descrever cenas, reconhecer objetos e sugerir ações com base no contexto visual.

Além disso, o Copilot Vision conecta informações entre dois aplicativos abertos simultaneamente, otimizando a comparação de dados e a automação de tarefas. Os usuários podem, por exemplo, receber dicas em jogos, traduzir textos em PDFs ou planejar viagens com base em e-mails.

Como Usar o Copilot Vision

Para utilizar o Copilot Vision, basta pressionar Win + C ou clicar no ícone do Copilot na barra de tarefas. O usuário pode capturar ou enviar uma imagem e, em seguida, fazer perguntas por comando de voz ou texto. Em um teste realizado, a IA analisou uma foto e identificou o significado de uma tatuagem, além de reconhecer elementos relacionados à astrologia.

No Microsoft Edge, o usuário ativa o Copilot clicando no ícone correspondente ou pressionando Ctrl + Shift + .. É necessário liberar o acesso à página da web atual nas configurações de privacidade. Durante um teste, a IA buscou informações sobre smartwatches em uma página da Amazon, identificando marcas e preços.

Com o Copilot Vision, a Microsoft amplia as capacidades do Copilot, oferecendo uma ferramenta poderosa para análise e interação com conteúdo visual, promovendo eficiência e economia de tempo nas atividades diárias.