A Microsoft Copilot Vision, um assistente de IA capaz de interpretar o conteúdo da tela, agora está disponível gratuitamente no navegador Edge, anunciou a Mustafa Suleyman, CEO da Microsoft AI.
A Copilot Vision funciona como uma “experiência baseada em conversas”, permitindo que os usuários interajam com os comandos falados e recebam respostas do Copilot. De acordo com Suleyman, uma vez ativado, a Copilot Vision pode “literalmente ver o que você vê na tela” e orientar os usuários através de várias tarefas. Por exemplo, ele pode ajudar os usuários a seguir uma receita durante a cozinha ou ajudar nos materiais de aplicação de emprego, decodificando as descrições do trabalho e fornecendo preparação de entrevista personalizada ou brainstorming de cartas de apresentação.
Quando ativado, o Copilot Vision pode destacar partes da tela para ajudar os usuários a encontrar informações relevantes, conforme indicado em uma página de suporte da Microsoft. No entanto, é essencial observar que o Copilot Vision não clica em links ou executa ações em nome do usuário. Enquanto o recurso agora está disponível gratuitamente, os recursos mais amplos de visão de copiloto em todo o sistema permanecem exclusivos para os assinantes Copilot Pro. Esses assinantes podem acessar a visão em outros aplicativos, como Photoshop, software de edição de vídeo ou jogos como o Minecraft.
Para optar por uma visão da Copilot, os usuários precisam visitar um site específico da Microsoft no navegador Edge. Ao fazer isso, eles devem receber um aviso para ativar o recurso. Uma vez ativado, os usuários podem iniciar uma sessão de visão abrindo a barra lateral do copiloto, clicando no ícone do microfone e aguardando o início da sessão, indicado por um carrilhão e uma alteração na cor do navegador. No entanto, a experiência do escritor foi marcada por questões técnicas, possivelmente devido ao uso de um laptop com pouca potência, o que impedia que os controles fossem carregados corretamente.
De acordo com a Microsoft, durante uma sessão de visão da Copilot, a empresa registra as respostas da Copilot ao usuário, mas não coleta entradas, imagens ou conteúdo da página do usuário. Os usuários podem encerrar uma sessão de visão, encerrando -a através dos controles ou fechando a janela do navegador.
