Besturingssystemen

AI kan meekijken in je browserscherm met Copilot Vision in preview van Windows 11

Afgelopen donderdag is bij de eerste insiders de update met Copilot Vision uitgerold. Voor nu enkel in de Verenigde Staten en gezien de privacy bezwaren zal het nog wel enige tijd duren voordat deze in de hele wereld wordt geïntroduceerd. 

Copilot Vision is niet zomaar beschikbaar, insiders die de functie willen testen moeten onderdeel zijn van Copilot Labs. Daarnaast moet men een abonnement hebben op Copilot Pro om onderdeel te zijn van Copilot Labs. Copilot Labs is een programma waarin insiders experimentele AI-functies kunnen testen. In het geval van Copilot Vision is dit de mogelijkheid voor Copilot om mee te lezen met websites die gebruikers bezoeken in Microsoft Edge. Het idee hierachter is dat gebruikers vragen kunnen stellen over wat ze zien, waarna Copilot deze vragen beter kan beantwoorden. Denk aan een vraag zoals: "Wat zijn de ingrediënten in deze salade?". Hier kan Copilot vervolgens een antwoord op geven aan de hand van de informatie die op de website weergegeven wordt. 

Naast het beantwoorden van vragen moet Copilot Vision het mogelijk maken om teksten samen te vatten en te vertalen. Het uitlichten van kortingen op een webshop moet ook tot de mogelijkheden behoren en Copilot Vision moet ook kunnen helpen met gamen in de browser. Een van de voorbeelden die Microsoft hiervoor geeft is GeoGuessr.

Microsoft hoopt met enkele maatregelen de privacy bezwaren ook zoveel mogelijk weg te ruimen. Zo zou Copilot Vision alle data na een sessie verwijderen en worden verwerkte audiofragmenten, afbeeldingen, en tekst niet opgeslagen of gebruikt voor verdere training. Daarnaast zou Copilot niet alle soorten websites kunnen bekijken. Hierbij gaat het volgens Microsoft om gevoelige content en content achter een betaalmuur. In essentie betekent dit dat er een lijst is met vooraf goedgekeurde websites waarop Copilot Vision werkt. 

Microsoft is niet geheel duidelijk over wat gevoelige content exact inhoudt, maar het bedrijf zou het zekere voor het onzekere nemen door met een whitelist te werken. Het blokkeren van het bekijken van content achter een betaalmuur is ook logisch te verklaren. Het bedrijf wordt namelijk momenteel aangeklaagd door The New York Times, die Microsoft beschuldigt van het omzeilen van zijn betaalmuur via de Copilot chatbot in Bing.

Al met al lijkt het erop dat Microsoft voorzichtig is met Copilot Vision om een ander debacle omtrent zijn AI-functies te voorkomen. Dit beperkt echter wel direct de bruikbaarheid van de functie. Zo lijkt het er sterk op dat Copilot Vision niet zal werken op de meeste nieuwswebsites. Daarnaast is het onduidelijk of de privacy maatregelen die Microsoft genomen heeft afdoende zijn om Copilot Vision overal ter wereld beschikbaar te kunnen maken.