Негізгі ұсыныстар
- Nvidia жақында 2D фотосуреттерді бірнеше секундта 3D көріністеріне айналдыратын техниканы көрсетті.
- Әдіс жарықтың нақты әлемде қалай әрекет ететінін шамамен анықтау үшін компьютер қуатын пайдаланады.
- Метаверс - бұл 3D көріністер пайдалы болатын аймақ, себебі оларды кез келген камера тұрғысынан көруге болады.
Nvidia-ның жаңа жасанды интеллект (AI) технологиясы жақын арада 2D фотосуреттерді бірнеше секунд ішінде 3D көріністеріне айналдырып, метаверс сияқты иммерсивті виртуалды кеңістіктерді жасауды мәтінді өңдеу сияқты тривиальды етеді.
Nvidia жақында жарықтың нақты әлемде қалай әрекет ететінін есептеу үшін есептеу қуатын пайдаланатын Instant NeRF деп аталатын фотосурет әдісін көрсетті. Ол ескі фотосуреттеріңізді бейне ойын сахнасына айналдыруы мүмкін немесе оны роботтар мен өздігінен жүретін көліктерді нақты әлемдегі нысандардың өлшемі мен пішінін түсінуге үйрету үшін пайдалануға болады.
"3D бейнелеу трансформацияның жаңа әлемін әкеледі", - деді Nvidia платформасында 3D алгоритмдерін басқаратын Visionary.ai компьютерлік көру компаниясының бас директоры Орен Дебби Lifewire-ге электронды поштамен берген сұхбатында. "3D пайдалану арқылы сіз сахнаның шынайы тереңдігіне еліктейсіз және кескінді жанды және шынайырақ етіп көрсетесіз. AR/VR және өнеркәсіптік камералардан басқа, 3D өте кең таралған, біз қазір оның барлық дерлік смартфондарда қолданылатынын көріп отырмыз. пайдаланушы тіпті біледі."
Өлшемдерді қосу
75 жыл бұрын Polaroid камерасымен түсірілген алғашқы лездік фотосурет 3D әлемін 2D кескінінде жылдам түсіруге бағытталған. Енді AI зерттеушілері керісінше жұмыс істеуде: қозғалыссыз кескіндер жинағын секундтарда сандық 3D көрініске айналдыру.
Кері рендеринг ретінде белгілі бұл процесс жарықтың нақты әлемде қалай әрекет ететінін шамамен анықтау үшін AI пайдаланады, бұл зерттеушілерге әртүрлі бұрыштарда түсірілген бірнеше 2D кескіндерінен 3D көріністі қайта құруға мүмкіндік береді. Nvidia бұл тапсырманы дерлік орындайтын тәсіл әзірлегенін мәлімдейді.
Nvidia бұл әдісті нейрондық сәулелену өрістері немесе NeRF деп аталатын жаңа технологиямен қолданды. Компания Instant NeRF деп аталатын нәтиже бүгінгі күнге дейін ең жылдам NeRF техникасы екенін айтады. Модельге бірнеше ондаған қимылсыз фотосуреттерді жаттықтыру үшін бар болғаны секунд қажет, содан кейін алынған 3D көріністі ондаған миллисекунд ішінде көрсете алады.
Егер көпбұрышты торлар сияқты дәстүрлі 3D бейнелері векторлық кескіндерге ұқсас болса, NeRF-тер растрлық кескіндер сияқты: олар объектіден немесе көріністен жарықтың таралу жолын тығыз түсіреді », - Дэвид Любке, графикалық зерттеулер жөніндегі вице-президент. Nvidia жаңалықтар релизінде: «Осы мағынада Instant NeRF 3D үшін сандық камералар мен JPEG сығымдау 2D фотосуреті сияқты маңызды болуы мүмкін - 3D түсіру және бөлісу жылдамдығын, жеңілдігін және қолжетімділігін айтарлықтай арттырады.”
NeRF беру үшін деректерді жинау үшін нейрондық желі сахнаның айналасындағы бірнеше позициядан түсірілген бірнеше ондаған суретті, сондай-ақ осы кадрлардың әрқайсысының камера орнын түсіруді талап етеді.
NeRF 3D кеңістігінің кез келген нүктесінен кез келген бағытта таралатын жарық түсін болжау арқылы көріністі қайта құру үшін шағын нейрондық желіні жаттықтырады.
3D тартымдылығы
Метаверс - бұл 3D көріністері пайдалы аймақтың бірі, себебі оларды кез келген камера тұрғысынан қарауға болады, - деді Брэд Квинтон, кеңейтілген шындыққа арналған Perceptus платформасының (AR) негізін қалаушы, Lifewire-ке электронды поштамен берген сұхбатында. Нақты өмірде бөлмені аралап, оның мазмұнын әртүрлі бұрыштардан көре алатынымыз сияқты, қайта жасалған 3D көрініс арқылы біз кеңістікте виртуалды түрде жылжып, оны кез келген тұрғыдан қарай аламыз.
"Бұл әсіресе виртуалды шындықта пайдалану орталарын жасау үшін пайдалы болуы мүмкін", - деді Куинтон.
Apple's Object Capture сияқты бағдарламалар 2D кескіндер сериясынан виртуалды 3D нысандарын жасау үшін фотограмметрия деп аталатын әдісті пайдаланады. 3D модельдері виртуалды шындық пен AR қолданбаларында кеңінен қолданылады, деп болжайды Квинтон. Мысалы, Perceptus AR платформасындағы сияқты кейбір AI нақты уақыттағы AR қолданбаларына мүмкіндік беретін нақты әлемді түсіну үшін 3D үлгілерін пайдаланады.
3D кескіндерін пайдалану сонымен қатар сахнадағы шынайы дүниенің тереңдігін еліктейді және кескінді тірі және шынайырақ етеді, деді Дебби. Боке әсерін жасау үшін (портрет режимі немесе кинематографиялық режим) 3D тереңдік картасын жасау қажет. Бұл әдіс барлық дерлік смартфондарда қолданылады.
"Бұл қазірдің өзінде фильм түсіретін кәсіби бейнеграфтар үшін стандарт және бұл әрбір тұтынушы үшін стандартқа айналуда", - деп қосты Дебби.
