A Microsoft lançou ontem uma série de PCs Copilot Plus que incluem novos recursos de IA integrados diretamente no Windows 11. Nos bastidores, a empresa está atualmente executando mais de 40 modelos de IA no Windows 11, graças ao novo tempo de execução do Windows Copilot. Isso também permite que os desenvolvedores: Use esses modelos em seu aplicativo.
Hoje, no Microsoft Build, a empresa está fornecendo mais detalhes sobre como funciona exatamente esse tempo de execução do Windows Copilot. O tempo de execução inclui uma biblioteca de APIs que os desenvolvedores podem aproveitar para seus próprios aplicativos, com uma estrutura de IA e um conjunto de ferramentas projetado para permitir que os desenvolvedores forneçam seus próprios modelos no dispositivo no Windows.
“A biblioteca Windows Copilot consiste em APIs de IA prontas para uso, como Studio Effects, Live Captions Translations, OCR, Recall with User Activity e Phi Silica, e estará disponível para desenvolvedores em junho”, disse Windows disse Pavan Davuluri. , chefe da Superfície.
Os desenvolvedores agora podem usar a biblioteca Windows Copilot para integrar efeitos de estúdio, filtros, desfoque de retrato e outros recursos em seus aplicativos. Meta está adicionando efeitos do Windows Studio ao WhatsApp, para que você possa obter recursos como desfoque de fundo e contato visual durante chamadas de vídeo. Legendas ao vivo e novos recursos de tradução baseados em IA também estão disponíveis para desenvolvedores com pouco ou nenhum código.
A Microsoft demonstrou ontem seu recurso Recall AI. Isso permite que o Copilot Plus PC documente e salve tudo o que você faz no seu PC, permitindo que você recupere suas memórias e pesquise na sua linha do tempo. Tudo isso é possível graças ao novo Índice Semântico do Windows, que armazena esses dados localmente, e a Microsoft planeja permitir que os desenvolvedores construam algo semelhante.
“Essa funcionalidade permite que os desenvolvedores que usam a API Vector Embeddings construam seus próprios armazenamentos de vetores e RAGs dentro de seus aplicativos e usando dados de aplicativos”, disse Davuluri.
Foto: Alison Johnson/The Verge
Os desenvolvedores também podem melhorar o novo recurso Recall no Windows adicionando informações de contexto aos seus aplicativos que alimentam o banco de dados que alimenta esse recurso. “Essa integração permite que os usuários continuem de onde pararam em um aplicativo, aumentando o envolvimento com o aplicativo e criando um fluxo mais contínuo para os usuários entre o Windows e os aplicativos”, disse Davuluri.
Todas essas melhorias no Windows para desenvolvedores, junto com os novos sistemas equipados com Arm e os futuros NPUs da AMD e Intel, são os primeiros blocos de construção para a criação de mais aplicativos com tecnologia de IA. A Microsoft está construindo uma plataforma para desenvolvedores criarem aplicativos de IA para Windows e espera que ela se torne uma parte fundamental do desenvolvimento do Windows na próxima década. No palco hoje no Build, Davuluri ficou diante de um slide que dizia: “O Windows é a plataforma mais aberta para IA”, demonstrando o quão importante este momento é para a Microsoft.
