Google-CEO Sundar Pichai kondigde aan dat het tijdperk van gemakkelijke AI-vooruitgang is geëindigd, waarbij hij de nadruk legde op een verschuiving naar meer uitdagende ontwikkelingsprocessen. Spreken bij de New York Times Dealbook-topschetste Pichai zijn overtuiging dat vooruitgang op het gebied van AI steeds moeilijker zal worden naarmate de industrie richting 2025 beweegt. Hij verklaarde: “Het laaghangende fruit is verdwenen. De heuvel is steiler.”
De CEO van Google gaat uitdagingen in de AI-ontwikkeling aan
Tijdens de top werd Pichai geconfronteerd met zorgen over de stagnatie van generatieve AI-verbeteringen. We rapporteerden het aankomende taalmodel van OpenAI, met de codenaam Orion, afnemende vertoond prestatierendement vergeleken met eerdere modellen. Deze bevindingen leidden tot een wijdverbreid debat over de vraag of het opschalen van AI-capaciteiten door het vergroten van data en computerbronnen zijn grenzen bereikte. Terwijl Sam Altman, CEO van OpenAI, dergelijke beweringen van de hand wees en beweerde dat er “geen muur is”, bood Pichai een gematigder perspectief.
Pichai onderschrijft niet volledig het idee dat de industrie geconfronteerd wordt met een muur in de AI-ontwikkeling, maar hij erkent dat het blijven vertrouwen op schaalvergroting alleen niet zal volstaan. Hij zei: “Als je snel begint met opschalen, kun je meer rekenkracht inzetten en veel vooruitgang boeken. We zullen zeker diepere doorbraken nodig hebben als we naar de volgende fase gaan.” Hij sprak zijn vertrouwen uit dat er tegen 2025 aanzienlijke vooruitgang zal zijn geboekt, met verbeteringen in de redenering en het vermogen om op betrouwbare wijze reeksen acties te voltooien.
Hoewel Pichai niet gelooft dat de grenzen van de verwerkingskracht zijn bereikt, wees hij erop dat het huidige computergebruik een “willekeurig getal” vertegenwoordigt. Hij gaf aan dat verdere schaalvergroting nog steeds mogelijk is, maar dat het essentieel is om fundamentele technische en algoritmische doorbraken te bereiken om aanzienlijke vooruitgang te boeken. Deze bewering is vooral opmerkelijk gezien het feit dat de grootste AI-modellen enorme hoeveelheden hulpbronnen verbruiken, wat bedrijven als Google en Microsoft ertoe aanzet alternatieve energiebronnen te zoeken, waaronder kernenergie, om aan hun eisen te voldoen.
De AI-industrie wordt momenteel geconfronteerd met opmerkelijke uitdagingen met betrekking tot de levering van gespecialiseerde chips, die van cruciaal belang zijn voor deze vooruitgang. Nvidia, een toonaangevende chipfabrikant, is dat wel worstelen om gelijke tred te houden met de torenhoge vraag, waarbij de beperkingen worden benadrukt die van invloed kunnen zijn op toekomstige schaalinspanningen op het gebied van AI.
Uitgelichte afbeeldingscredits: Googlen