Copilot Vision di Microsoft analizza il tuo schermo per un’assistenza AI avanzata

Oggi, Microsoft ha introdotto una funzionalità innovativa chiamata Copilot Vision come parte dei suoi nuovi Copilot Labs . Questa iniziativa consente a Microsoft di pilotare nuove funzionalità AI con un gruppo limitato di utenti per raccogliere feedback preziosi e migliorare le funzionalità. Copilot Vision assomiglia alle funzionalità video dimostrate da OpenAI all’inizio di quest’anno , offrendo agli utenti assistenza in tempo reale su misura per il contenuto visualizzato sui loro schermi.

Attualmente, Copilot Vision è disponibile esclusivamente all’interno di Microsoft Edge . Una volta attivato, gli utenti che visitano i siti Web supportati possono interagire con Copilot ponendo domande relative al contenuto della pagina in tempo reale. La funzionalità non solo aiuta a rispondere alle query, ma può anche suggerire azioni successive per aiutare con le attività in corso. La possibilità di pronunciare le query in modo naturale, anziché digitarle, fa sì che sembri che un esperto sia seduto accanto a te, offrendoti aiuto durante la navigazione.

Microsoft ha progettato Copilot Vision con una forte enfasi sulla privacy . Questa funzionalità funziona interamente su base opt-in, il che significa che è abilitata solo quando gli utenti la scelgono espressamente. È importante sottolineare che Microsoft assicura agli utenti che nessun dato, inclusi audio, immagini, testo o conversazioni da Copilot Vision , viene archiviato o utilizzato per l’addestramento del modello. Dopo la conclusione della sessione Vision , tutti i dati associati vengono cancellati in modo permanente.

Inoltre, Copilot Vision non è applicabile ai siti Web che presentano paywall o contenuti sensibili. Durante questa fase preliminare, Microsoft ha limitato Copilot Vision a un elenco selezionato di siti Web pre-approvati, con l’intenzione di ampliarne la disponibilità in futuro, dando sempre priorità alla sicurezza e alla responsabilità dell’utente.

È fondamentale chiarire che Copilot Vision non agisce come un agente; non può eseguire azioni per tuo conto. Invece, funziona come un compagno utile, rispondendo alle domande durante il tuo percorso di navigazione.

Copilot Vision è ora disponibile per un gruppo selezionato di utenti Copilot Pro negli Stati Uniti. Questa funzionalità ha il potenziale di trasformare il modo in cui interagiamo con il Web, creando un’esperienza di navigazione più intuitiva e di supporto. Man mano che Microsoft sviluppa ed espande ulteriormente questa funzionalità rivoluzionaria, possiamo prevedere un’esperienza Copilot ancora più efficace nel prossimo futuro.

Fonte