Deze generatieve AI-startup bindt camera's op de rug van mensen


Een startup traint een AI-systeem waarvan het beweert dat het makers in staat zal stellen filmische werelden te genereren, met volledige controle over het landschap, de personages, de belichting en de beweging. Hoe? Door mensen camera's op hun rug te laten vastbinden en de wereld rond te trekken.

Odysseeopgericht door zelfrijdende pioniers Oliver Cameron en Jeff Hawke (Cameron was voorheen de VP of Product bij Cruise), zegt dat het een “geavanceerd camera-opnamesysteem” heeft ontwikkeld dat gegevens kan verzamelen op vrijwel elke plek waar een persoon maar kan komen. Het systeem weegt ongeveer 25 kilo en bevat zes camera's, twee lidar sensoren, en een traagheidsmeeteenheid.

Een gelijkenis vertonend met Streetview Trekker van Googlekan het systeem zijn omgeving vastleggen in “3,5K-resolutie” en 360 graden, met daaraan toegevoegd “natuurkundig nauwkeurige” metagegevens over diepte-informatie.

Dus wat is het punt? Welnu, Odyssey zegt dat het gegevens uit het systeem haalt en deze door algoritmen voert om “de fijne details vast te leggen waaruit onze wereld bestaat.” In wezen genereert het bedrijf digitale reconstructies van scènes uit de echte wereld a la Meta's Hyperscape project — scènes met bossen, grotten, paden, stranden, gletsjers, parken, gebouwen, enzovoort.

Odyssee
Een van de opnieuw gemaakte scènes van Odyssey. Beeldcredits:Odyssee

Het is nog niet helemaal duidelijk hoe deze reconstructies zich zullen vertalen in betere generatieve tools voor creatieven. Cameron en Hawke hebben dat eerder gedaan gezegd dat Odyssey verschillende generatieve AI-modellen heeft ontwikkeld die lagen van visuele details creëren, inclusief objectgeometrie, verlichting en beweging, en deze vervolgens combineren tot een enkele virtuele ‘wereld’ om de gewenste scènes te creëren.

Zelfs de beste”wereld modellenTegenwoordig hebben ze echter beperkingen – en Odyssey beweert niet dat ze deze allemaal heeft opgelost. Niettemin zorgt het ervoor dat er voldoende geld beschikbaar is om verder te komen.

Odyssee vandaag aangekondigd dat het $ 18 miljoen ophaalde in een Series A-financieringsronde onder leiding van EQT Ventures met deelname van GV en Air Street Capital. Het nieuwe geld, dat het totaal opgehaalde bedrag van het bedrijf op 27 miljoen dollar brengt, zal worden besteed aan het opschalen van de gegevensverzamelingsactiviteiten van Odyssey in Californië.

Odyssey is van plan zijn gegevensverzameling in de toekomst uit te breiden naar andere staten en landen – met privacybescherming, zou je hopen. (Het Street View-team van Google bevindt zich bijvoorbeeld in de draadkruis van toezichthouders voor het vastleggen van beelden van openbare plaatsen die de privacy van omstanders schenden.)

“Wij denken dat het voor generatieve modellen onmogelijk zal zijn om werelden van Hollywood-niveau te genereren die levend aanvoelen zonder training op een enorme hoeveelheid rijke, multimodale 3D-gegevens uit de echte wereld”, schreef het bedrijf in een bericht op zijn website. bloggen. “Wij geloven dat een geavanceerd model voor het opbouwen van een generatieve wereld een betere manier zal ontsluiten om films, games en meer te maken.”



Source link