Microsoft a început testarea unei actualizări semnificative pentru asistentul său AI, Copilot, introducând funcționalitatea „Copilot Vision”, care permite asistentului să interacționeze direct cu ecranul și aplicațiile utilizatorului. Anterior limitat la browserul Edge, această îmbunătățire extinde capacitățile Copilot pentru a oferi asistență în diverse aplicații și sarcini pe PC.
„Copilot Vision” permite asistentului AI să analizeze și să răspundă la conținutul afișat pe ecran, facilitând navigarea în aplicații precum Adobe Photoshop, analizarea imaginilor sau paginilor web și optimizarea setărilor în software-uri precum Clipchamp. Această funcționalitate este disponibilă în prezent pentru un număr limitat de participanți la programul Windows Insider din SUA, cu planuri de extindere în viitor.
De asemenea, Microsoft a introdus o nouă capacitate de căutare a fișierelor în cadrul Copilot, suportând formate precum .docx, .xlsx, .pptx, .txt, .pdf și .json, simplificând astfel recuperarea documentelor. Aceste actualizări sunt disponibile prin aplicația Copilot pe Windows, iOS și Android, fără a necesita un PC Copilot Plus. O lansare mai largă pentru toți utilizatorii Windows 11 este planificată în următoarele săptămâni sau luni.
Pentru a aborda preocupările legate de confidențialitate, „Copilot Vision” funcționează într-un mod similar cu partajarea ecranului din Microsoft Teams și necesită permisiunea explicită a utilizatorului pentru a accesa și interacționa cu conținutul de pe ecran. Datele procesate nu sunt stocate sau utilizate pentru antrenarea modelelor AI, iar funcționalitatea este limitată la un set preaprobat de site-uri web, excluzând conținutul cu plată sau sensibil.
În plus, Microsoft a prezentat alte funcționalități noi pentru Copilot, inclusiv „Copilot Actions”, care permite completarea sarcinilor fără intervenție manuală prin platforme precum OpenTable și Expedia, și „Deep Research”, care consolidează informații din multiple surse online și documente. Aceste îmbunătățiri poziționează Copilot ca un asistent AI mai intuitiv și capabil pentru utilizarea digitală zilnică.
