Luma AI, een door a16z ondersteund bedrijf dat gespecialiseerd is in AI-video en 3D-modellen, uitgegeven Ray3 Modify, een nieuw model waarmee gebruikers bestaande beelden kunnen aanpassen met behulp van karakterreferentiebeelden, terwijl de originele uitvoering behouden blijft. Gebruikers leveren begin- en eindframes om overgangsbeelden te genereren en zo de uitdagingen op het gebied van conservering voor creatieve studio’s aan te pakken. Ray3 Modify pakt problemen aan bij het handhaven van menselijke prestaties tijdens op AI gebaseerde bewerking of het genereren van effecten. Het model houdt zich nauw aan de inputbeelden, waardoor studio’s menselijke acteurs kunnen inzetten in creatieve of merkproducties. Het behoudt specifiek de oorspronkelijke beweging, timing, ooglijn en emotionele weergave van de acteur terwijl het de scène transformeert. Gebruikers voeren een karakterreferentie in om het uiterlijk van de menselijke acteur te veranderen in het opgegeven personage in de beelden. Bij dit proces blijven details zoals kostuums, gelijkenis en identiteit gedurende de hele shoot behouden. Dergelijke mogelijkheden zorgen voor consistente visuele elementen in verschillende reeksen zonder extra filmopnamen. Makers leveren ook begin- en eindreferentieframes om videosegmenten te produceren met Ray3 Modify. Deze functie helpt bij het regisseren van vloeiende overgangen of het specificeren van karakterbewegingen en -gedragingen. De continuïteit tussen scènes blijft intact en ondersteunt complexe verhaalstructuren in videoprojecten. Amit Jain, mede-oprichter en CEO van Luma AI, verklaarde: “Generatieve videomodellen zijn ongelooflijk expressief, maar ook moeilijk te controleren. Vandaag introduceren we met trots Ray3 Modify, dat de echte wereld combineert met de expressiviteit van AI en tegelijkertijd volledige controle geeft aan creatieven. Dit betekent dat creatieve teams optredens kunnen vastleggen met een camera en deze vervolgens onmiddellijk kunnen aanpassen zodat ze zich op elke denkbare locatie kunnen bevinden, kostuums kunnen veranderen of zelfs terug kunnen gaan en de scène opnieuw kunnen opnemen met AI, zonder de fysieke shoot opnieuw te hoeven maken.” https://www.youtube.com/watch?v=4s-wRxtSKC0 Het model kan rechtstreeks worden geïntegreerd in Luma’s Dream Machine-platform, waardoor het onmiddellijk toegankelijk is voor gebruikers. Luma positioneert zichzelf ten opzichte van concurrenten, waaronder Runway en Kling, op het gebied van AI-videogeneratie. Het bedrijf introduceerde de eerste mogelijkheden voor videomodificatie in juni 2025. Deze release volgt op een financieringsronde van $ 900 miljoen die in november werd aangekondigd, onder leiding van Humain, een AI-bedrijf dat eigendom is van het Saudische Public Investment Fund. Bestaande investeerders a16z, Amplify Partners en Matrix Partners sloten zich aan bij de ronde en verschaften substantieel kapitaal voor uitbreiding. https://static.cdn-luma.com/files/sanity/c9df5066-d549-4793-9dbb-fdff8ae16fba.mp4
Video: Luma
Luma is van plan om in samenwerking met Humain een 2GW AI-cluster te bouwen in Saoedi-Arabië. Dit infrastructuurinitiatief ondersteunt het schalen van computerbronnen voor geavanceerde AI-video- en 3D-modelleringsbewerkingen.
