Modeli i botës së re mund të stimulojë orët e udhëtimit fotorealist me disa shpella

Nisja e AI Deckart të mërkurën zbuloi Oasis 3, modeli i saj më i fundit botëror interaktiv që mund të gjenerojë mjedise fotorealiste në kohë reale, ka mësuar vetëm TechCrunch. Modeli është aktualisht në dispozicion nëpërmjet API.

Nisja fillimisht synon kompanitë autonome të makinave që duhet të simulojnë skenarë të rrallë në shkallë dhe planifikon të zgjerohet në robotike dhe aplikime të tjera fizike të AI. Por basti më i madh është tek zhvilluesit: Duke ofruar akses prej ditës së parë, Detar po përpiqet të ndërtojë një ekosistem zhvillues rreth modeleve botërore shumë të ngjashme me atë se si OpenAI bëri me modelet gjuhësore.

Ai do të jetë modeli i parë botëror i përdorshëm që njerëzit mund ta programojnë mbi të, i tha TechCrunch. Mendoj se do të ketë një komunitet të tërë zhvilluesish që del në sipërfaqe të kësaj.

Nisja tashmë ka një komunitet prej më shumë se 100,000 zhvilluesish, shumë prej të cilëve po ndërtojnë prodhime mbi modelin e saj real të videos Lusi, kryesisht në e-tregti dhe në rrjedhë të drejtpërdrejtë. Oasis 3 bazohet në atë model themeli dhe përfaqëson kompaninë që shtyn në AI fizik. Hyrja është vlerësuar me 0.02 dollarë për sekondë dhe çmimet e ndërmarrjeve varen nga rastet e përdorimit, tha Deckart.

Detar po luan në një arenë modelesh botërore gjithnjë e më të mbushura. Vitin e kaluar, Google publikoi Genie 3 në paraqitjen e parë të kërkimit, Fei-Fei Liei World Labs filloi me Mermer për rastet e përdorimit komercial, dhe video-gjenerimet si Luma dhe Randej gjithashtu po përkthejnë modelet e tyre të video-gjykencës të njohura në modelet e botës.

Lëshimi i Oasis 3’s vjen disa javë pasi dy-vjeçari Deckart mblodhi 300 milionë dollarë, që Leitersdorf thotë se pasoi rritjet e mëdha të kërkesës për modelet që ndërtuam në e-tregencë, në qarkullim të gjallë dhe në AI fizike. Raundi rriti vlerësimin e Dedart në gati 4 miliardë dollarë dhe solli një seri investitorësh strategjikë si Tojota, Adobe dhe EBay. Të gjitha këto kompani janë klientë potencialë, thotë Leitersdorf. Nvidia, një investitor ekzistues, mori pjesë gjithashtu në raund.

Ana e Oasis 360s qëndron në foto-realeizmin e modeleve të tij dhe aftësinë e pafund të brezit. Kjo është për shkak të ndonjë magjie të efektshme në pjesë të Deckartit, të fuqizuar nga kompania, e cila është produkti tjetër kryesor: softueri DOS (Dekart Optimizim Stack) që lejon modelet të punojnë me efektshmëri në Nvidia, Amazonë dhe hardware Google, duke i bërë modelet e saj shumë më pak të shtrenjta për të drejtuar sesa konkurrentët.

Kjo është ndërtuar mbi të gjithë pirgun tonë të kohës reale, të cilin ne e optimizojmë deri në hardware, tha Leitersdorf. Duke qenë kaq vertikalisht të integruar, ne jemi në gjendje të jemi më shumë se një rend i shkallës më të lirë se kushdo tjetër në industri me qëllim që të drejtojmë këto modele.

Modelet e nisjes janë kaq të efektshme, për Leitersdorf, saqë është djegur përmes më pak se 100 milionë dollarë gjatë jetës së tij.

Oasis 3 gjeneron mjedise të sakta fizikisht, shumë-kamera ♫ një front i paraqitur dhe dy anë-faqesh për trainimin dhe testimin e sistemeve. Dhe në vend që të ofrojnë demostrime të kufizuara dhe parashikime kërkimore, Deckart i lejon zhvilluesit të krijojnë skenarë pafundësisht, gjë që është e përsosur për zhvilluesit autonome të makinave që kërkojnë të provojnë sa më shumë raste të larta të jetë e mundur.

Krahasuar me modelet e tjera I’ve provuar, si GoogleYis Genie 3 ose Labs Worlds Mermer, Oasis 3 çliron mjediset më fotorealeiste nga një tekst i vetëm i dukshëm. Dhe fakti që mund të bashkëveproni me ta për orë të tëra sugjeron një nivel efektshmërie që rivalëve të Dekatrit mund t’u mungojë.

Por duke ju lejuar të krijoni një botë për kaq shumë kohë, modeli gjithashtu degradon ndjeshëm.

Në testimin tim, gjeta se sistemi mund të krijonte vazhdimisht një skenë fillestare që përputhet me të shpejtëën, por integriteti tematik degradoi me shpejtësi ndërsa lëvizja nëpër botë. E nxita të krijonte një rrugë të Nju Jorkut në mëngjes, kështu ishte, bukur. Por ndërsa udhëtoja, mjedisi dukej më pak si Nju Jorku dhe më shumë si një version standard i çdo qyteti urban, perëndimor.

Kur u përpoqa të kthehesha dhe të kthehesha në kryqëzimin fillestar, u zhduk, u zëvendësua nga një mjedis krejt i ri. Mbi të gjitha, kontrollet nuk janë shumë të ndjeshme, dhe shpesh humba kontrollin mbi vendin ku po lëvizte makina (përsëri, një tërheqje e ndarë nga modelet e tjera botërore I’ve testuar). Përvoja u ndje më pak si një simulim koherent dhe më shumë si një ëndërr, një lumë i ndarë i vetëdijës që shpejt rritet josensike.

Një çështje tjetër, të cilën e kam parë edhe në modelet e tjera botërore, është se makina vetëm sa do të ngasë makinat e tjera, që do të thotë se modeli nuk e simulon siç duhet fizikën në mjedis. Leitersdorf e quan këtë një problem kërkimor të ♫majorit, që ne po e çamë tani, duke ia atribuar këtë faktit se ka shumë më tepër të dhëna për të ngarë makinën në krahasim me aksidentet.

Një pjesë e asaj që e bën të vështirë qëndrueshmërinë fizike është thelbësore për mënyrën se si funksionon ky model botëror. Oasis 3 është auto-regresive, që do të thotë se gjeneron një kornizë në një kohë, dhe shikon prapa në atë që më parë gjeneroi për të vendosur w