In een nieuwe update van hun Copilot AI-collectie is Microsoft dat wel lancering een reeks verbeteringen die naar verwachting de interactie met apparaten gemakkelijker zullen maken. Onder hen zijn Copilot Vision, Think Deeper en Copilot Voice verder ontworpen om gebruikersgerichte, tijdige en contextbewuste ervaringen te bieden op Windows, iOS, Android en internet.
Al deze functies maken op de een of andere manier deel uit van de bredere aanpak die Microsoft hanteert om Copilot midden in de dagelijkse activiteiten van mensen te plaatsen, waarbij AI-oplossingen worden gecombineerd met de bescherming van de privacy van gebruikers.
Copilot Vision: Een frisse kijk en benadering van het gebruik van het World Wide Web
Een van de nieuwe functies is Copilot Vision, waarmee gebruikers allerlei vragen kunnen stellen over de inhoud op hun scherm – of het nu gaat om de tekst of afbeeldingen op een webpagina. Zo is het bijvoorbeeld mogelijk om tijdens het gebruik van de site te vragen naar een bepaald recept dat op een foto staat afgebeeld of om meubeladvies. Copilot Vision werkt vervolgens op een manier waarbij het de inhoud scant die de gebruikers gebruiken en in realtime op de gebruiker reageert, op basis van de inhoud.
Toegankelijk via Microsoft Edge door “@copilot” in de adresbalk te typen. Copilot Vision is beschikbaar als onderdeel van Copilot Labseen exclusief aanmeldingsprogramma dat experimentele functies biedt aan een selecte groep gebruikers. Hoewel deze functie niet geheel baanbrekend is (het Android-platform van Google biedt vergelijkbare mogelijkheden), beweert Microsoft dat Copilot Vision nog een stap verder gaat door ervoor te zorgen dat er geen gegevens worden opgeslagen of gebruikt om AI-modellen te trainen.
De ingewikkelde Copilots van Microsoft in detail uitgelegd
Microsoft heeft met deze tool graag zijn toewijding aan privacy benadrukt. In een recente blogpost benadrukte het bedrijf dat Copilot Vision alle verwerkte gegevens onmiddellijk na een gesprek verwijdert, zonder dat er audio, afbeeldingen of tekst worden opgeslagen. Dit is waarschijnlijk een reactie op de groeiende bezorgdheid over gegevensmisbruik in AI-systemen, een punt dat Microsoft zorgvuldig heeft aangepakt na juridisch onderzoek naar eerdere incidenten met zijn AI-producten.
Copilot Vision heeft echter bepaalde beperkingen. Momenteel kan de tool geen inhoud van betaalmuur- of gevoelige websites analyseren, waardoor de functionaliteit wordt beperkt tot een vooraf goedgekeurde lijst met webeigenschappen. Deze beperking lijkt bedoeld om juridische uitdagingen te vermijden die vergelijkbaar zijn met die waarmee Microsoft wordt geconfronteerd met The New York Times, die het bedrijf ervan beschuldigde zijn AI-tools toe te staan betaalmuren te omzeilen en toegang te krijgen tot premium-inhoud.
Denk dieper: complexe problemen aanpakken met AI-redenering
Een andere belangrijke toevoeging aan de Copilot-suite is Think Deeper, een functie die gebruikmaakt van geavanceerde redeneermodellen om gebruikers te helpen bij het navigeren door complexe taken. Of het nu gaat om het oplossen van ingewikkelde wiskundige problemen of het vergelijken van meerdere opties voor woningrenovatie, Think Deeper is ontworpen om ingewikkelde scenario’s op te splitsen en te analyseren.
Microsoft heeft Think Deeper beschreven als een hulpmiddel dat stapsgewijze begeleiding biedt, waardoor het nuttig is voor zowel alledaagse uitdagingen als meer gespecialiseerde problemen. Het bedrijf merkte op dat de functie wordt aangedreven door ‘redeneringsmodellen’ die extra tijd nodig hebben om te reageren, wat zorgt voor grondiger en nauwkeuriger antwoorden. Hoewel Microsoft zijn lippen stijf op elkaar heeft gehouden over de specifieke modellen die worden gebruikt, gaat het waarschijnlijk om een aangepaste versie van OpenAI’s o1-model, dat Microsoft voor dit doel heeft verfijnd.
Momenteel is Think Deeper alleen beschikbaar voor een selecte groep Copilot Labs-gebruikers in landen als de VS, het VK, Canada, Australië en Nieuw-Zeeland, met plannen voor een bredere beschikbaarheid in de toekomst.
Copilootstem: Conversationele AI op uw commando
De laatste in de lijn van de AI-functies van Microsoft is Copilot Voice, de mogelijkheid om Copilot aan te spreken en opdrachten te geven. Copilot Voice werd voor het eerst gelanceerd in de VS, Groot-Brittannië, Canada, Australië en Nieuw-Zeeland en breidt het ethos van Copilot uit met mondelinge antwoorden.
Net als de stem van OpenAI in ChatGPT, kan Copilot Voice de stemtoon waarnemen en dienovereenkomstig reageren. Sommige functies van de applicatie maken hem nog aantrekkelijker: gebruikers kunnen Copilot bijvoorbeeld pauzeren tijdens het gesprek of de antwoorden midden in de zin onderbreken. Het kenmerk van de applicatie zijn de vier synthetische stemmen die heel natuurlijk en realistisch aanvoelen.
Er zijn echter grenzen aan de mate waarin gebruikers gebruik kunnen maken van Copilot Voice. Microsoft heeft een op tijd gebaseerde gebruikslimiet geïmplementeerd, waarbij Copilot Pro-abonnees toegang krijgen tot extra minuten, afhankelijk van de algemene vraag.
Personalisatie: Copilot afstemmen op uw voorkeuren
Naast de belangrijkste functie-updates introduceert Microsoft ook personalisatieopties voor Copilot. Met deze instellingen kan de AI zijn suggesties afstemmen op basis van eerdere interacties van de gebruiker, waarbij inzichten worden verkregen uit activiteiten in andere Microsoft-apps en -services. Volgens Microsoft zal dit Copilot helpen relevantere aanbevelingen te bieden en sneller toegang te krijgen tot handige functies.
De uitrol van personalisatie loopt echter in bepaalde regio’s vertraging op. Voorlopig zal deze functie niet meer beschikbaar zijn in de EU of het VK, omdat Microsoft opties blijft afwegen over hoe zich aan te passen aan de strenge wetten op gegevensbescherming in deze regio’s. Het volgt de strategie die toonaangevende IT-bedrijven als Apple en Meta en andere bedrijven hebben uitgevoerd bij het uitrollen van AI-oplossingen in de Europese Unie.
Microsoft heeft aangegeven dat het bedrijf ernaar uitkijkt om personalisatie te bieden aan de gebruikers op deze gebieden en tegelijkertijd te voldoen aan de wettelijke bepalingen zoals de Digital Services Act, die het gebruik van AI en gegevensbescherming in de EU reguleert. In het verleden heeft het bedrijf met bepaalde regelgevingsproblemen te maken gehad, met name in het assortiment, de recente waarschuwing van het EMA aan Microsoft dat het bedrijf gestraft kan worden omdat het niet genoeg details geeft over zijn generatieve AI-producten. Privacy en verantwoordelijkheid staan centraal
Tijdens de uitrol van deze nieuwe functies heeft Microsoft volgehouden dat privacy en gebruikersfeedback centraal staan in het ontwikkelingsproces. Het bedrijf heeft benadrukt dat geen van de gegevens die door Copilot Vision, Think Deeper of Copilot Voice worden verwerkt, wordt gebruikt voor AI-training of wordt opgeslagen buiten de onmiddellijke sessie.
Uitgelichte afbeeldingscredits: Microsoft