Nvidia, Apple Vision Pro’da yüksek çözünürlüklü Omniverse Cloud görüntülerine olanak sağlıyor

Nvidia Apple Vision Pro kulaklığın yeni prizmasından görüntülenen Omniverse dijital ikiz teknolojisini sergiledi.

Nvidia mühendisleri, Omniverse Cloud uygulama programlama arayüzünün (API) etkileşimli, endüstriyel dijital ikizleri Apple Vision Pro’ya aktarmasını sağladı. Demoyu yaptım ve bulut tabanlı görüntü akışını, Vision Pro’da çalışan bir uygulamanın destekleyebileceğinden çok daha iyi bir çözünürlükte görebildim. Birazdan bu büyüyü açıklayacağım.

Bu, tüketiciler için 3.500 dolardan pahalı olan Apple Vision Pro’nun parlayabileceği türden bir uygulamadır. Endüstriyel ve kurumsal şirketler, dijital ikizlerin büyük miktarda para tasarrufu sağlayabileceğini göz önünde bulundurarak ekiplerini bu tür kulaklıklarla donatmaya gücü yetebilir.

Nvidia CEO’su Jensen Huang, Nvidia GTC 2024’teki açılış konuşmasında “Omniverse Cloud, Apple Vision Pro’da mevcut” dedi. Büyük alkış aldı.

dijital ikiz fikri İlk önce dijital biçimde bir fabrika inşa etmek, her şeyi gerçekçi bir şekilde simüle etmek, böylece tasarımın, herhangi biri fiziksel fabrikada temel atmadan önce yinelenip mükemmelleştirilebilmesini sağlamaktır. Fabrika inşa edildikten sonra dijital ikiz, fabrikanın hızlı bir şekilde yeniden yapılandırılması için kullanılabilir. Fabrikanın çalışmasıyla ilgili verileri yakalayan sensörler sayesinde tasarımcılar, simülasyonun daha doğru olması için dijital ikizi değiştirebiliyor. Bu geri bildirim döngüsü, kuruluşa büyük miktarda para tasarrufu sağlayabilir.

Bugün Nvidia GTC’de duyurulan, Omniverse Bulut API’leri veya uygulama programlama arayüzleri üzerine kurulu yeni bir yazılım çerçevesi, geliştiricilerin Evrensel Sahne Tanımı (OpenUSD) endüstriyel sahnelerini içerik oluşturma uygulamalarından Nvidia Grafik Dağıtım Ağı’na (GDN) kolayca göndermelerine olanak tanıyor. Gelişmiş 3D deneyimlerini Apple Vision Pro’ya aktarabilen, grafiklere hazır veri merkezlerinden oluşan küresel ağ. Bu, Nvidia’nın GeForce Now bulut oyun ağı için oluşturduğu ağla aynı.

Canlı demo

Nvidia bana GTC’de tanıtılacak olan teknolojinin bir demosunu gösterdi. Demoda, Apple Vision Pro’nun yüksek çözünürlüklü ekranlarına tam sadakatle aktarılan bir arabanın etkileşimli, fiziksel olarak doğru dijital ikizini görebildim.

Sahnede yaklaşık 100 milyar üçgen görüyordum; bunların hepsi ışın izlemeli, global aydınlatmalı, dinamik aydınlatmalı, ön hesaplamasız, etkileşimli eylem bulutta işleniyordu. Sanki büyük ekran bir televizyonda sadece kulaklığın içinde bir animasyon izliyor gibiydik.

Demo, Omniverse platformunda CGI stüdyosu Katana tarafından geliştirilen bir araba yapılandırıcı uygulamasını gösteriyordu. Nvidia bana boya ve döşeme seçenekleri arasında nasıl geçiş yapacağımı ve hatta araca nasıl gireceğimi gösterdi; 3 boyutlu fotogerçekçi ortamları fiziksel dünyayla harmanlayarak mekansal hesaplamanın gücünden yararlanıyor. Parmaklarımı araba modeline uzatıp onu küçültmek için kıstırabiliyordum ya da parmaklarımı açarak onu benden daha büyük bir büyüklüğe kadar genişletebiliyordum. Ayrıca arabayı Matchbox arabası boyutuna kadar küçültebilirim. Her iki durumda da, görüntünün kalitesi hala oldukça muhteşem görünüyor.

Normalde, uygulamalar için sınırlı miktarda bellek (8 GB veya 16 GB) nedeniyle Apple Vision Pro’da görsellerin kalitesi sınırlıdır. Ancak GamesBeat ile yaptığı röportajda Nvidia’nın simülasyondan sorumlu başkan yardımcısı Rev Lebaredian, bulut akışının Nvidia’nın bulut veri merkezinden kulaklığa görüntü göndermesine ve gerektiğinde aktarmasına olanak tanıdığını söyledi.

Lebaredian, “Bir süredir RTX ve görüntü işleme içeren tüm teknolojilerimizi Vision Pro’ya taşımak için çalışıyoruz” dedi. “Grafik kalitesi açısından cihazda yapabilecekleriniz konusunda sınırlamalar var. Gördüğünüz deneyim aslında bulutta Omniverse ve Omniverse RTX ile gerçekleştirilen, cihazın kendisinin işleyebileceği veya çoğu normal bilgisayarın GeForce ile aynı altyapı üzerinde çalışmayı kaldırabileceğinden daha büyük ve daha karmaşık olan USD içeriğiyle yapılan bir işlemedir. Artık bulut oyun hizmeti. GDN’de ve doğrudan cihaza aktarılıyor.”

Mühendisler veya dijital ikiz gibi 3 boyutlu görüntülerin doğru resmini elde etmek isteyen herkes için bu, sanal dünyanın içinden tasarım yapmalarına ve simülasyonun dijital dünyasının gerçekte nasıl olduğuna dair gerçekçi bir anlayışla daha hızlı yineleme yapmalarına olanak tanır.

Günün saatini değiştirmek için ortam sekmesine gidip onu kaydırabiliyordum ve sekmeyi sıfırladıktan sonra aydınlatma değişti. Yan pencereden baktığımda mor görmek gibi ara sıra eserler vardı. Ama çoğunlukla muhteşemdi. Arabanın içindeki sandalyeye oturup sürücü koltuğuna geçtim. Bu yüzden aracın içinde olmanın nasıl görüneceğini görmem lazım. Ayrıca arabanın zemininde yürümeye başlayan bir çocuk olmanın nasıl bir şey olduğunu da görmem lazım.

Arabayı farklı iç tasarımlara ve farklı modellere göre yapılandırabilirim. Ve sahneyi anında yeniden hesapladı.

Onu sürebilir miyim? Hayır. Aslında bu bir video oyunu değil.

Bir Wistron fabrikasının içi

Demomda Nvidia bana Tayvan’daki Wistron sunucu fabrikasının bir bölümünden bir sahne de gösterdi. Fabrika, Nvidia DGX süper bilgisayarını fabrikanın bir bölümünden diğerine taşıyabilecek bir dizi ray gösterdi. Yansımalar, gölgeler ve ışık oldukça iyi görünüyordu. Ayrıntıları yakınlaştırmak veya gerçek zamanlı olarak dilediğim gibi uzaklaştırmak için Vision Pro’nun yakınlaştırma ve yakınlaştırma özelliğini kullanabilirdim. Fabrika modeli, görüntüde yüz milyonlarca poligonun bulunduğu gerçek bilgisayar destekli tasarım (CAD) modellerini kullandı.

Lebaredian, “Buradaki fikir, fabrika kuran insanların, ekipmanlarının nereye gideceğini önceden planlayabilmeleri ve ana ekipman parçalarını fiilen bırakmadan önce herhangi bir hat verimsizliği yaşamadıklarından emin olabilmeleridir” dedi. .

Tabii ki, fabrikayı incelemek için Tayvan’a bir gezi yapacağımı sanmıyorum ve bu yüzden fabrikayı bu kadar yüksek kaliteli görüntülerle görmek çok ilginç.

Bulut esas olarak izleyicinin yaklaşık 20 gigabaytlık veri görmesine izin verirken, Apple Vision Pro normalde kulaklığın düşük güçle ve cihazdaki sınırlı bir işlemciyle çalışması gerektiğinden birinin yalnızca birkaç gigabaytlık veri görmesine izin veriyor. Demo, göz başına 16 yerine 96 gigabayt RAM görmenizi sağlıyor. İşlem gücü ise göz başına 50 teraflop civarında olabilir; Vision Pro, görüntülerin işlenmesi için bu tür işlemleri yapamaz. Demonun verileri, Nissan’ın arabaları için promosyon malzemeleri oluşturmak için kullandığı Katana adlı bir Omniverse ortağından geldi.

Lebaredian, “Tam olarak aynı verileri alıp hiçbir kayıp olmadan ve netlikte bir artış olmadan Vision Pro’ya aktarabildiğimizi göstermekten gerçekten heyecan duyuyoruz” dedi.

RTX kurumsal bulut işlemenin gücü mekansal bilişime taşınıyor

Uzamsal bilgi işlem, insanlar, ürünler, süreçler ve fiziksel alanlar arasında sürükleyici deneyimler ve kusursuz etkileşimler sunmak için güçlü bir teknoloji olarak ortaya çıkmıştır. Endüstriyel kurumsal kullanım durumları, üretim deneyimlerini gerçeğe uygun hale getirmek için inanılmaz derecede yüksek çözünürlüklü ekranlar ve yüksek kare hızlarında çalışan güçlü sensörler gerektirir.

Bu yeni Omniverse tabanlı iş akışı, Apple Vision Pro’nun çığır açan yüksek çözünürlüklü ekranlarını Nvidia’nın güçlü RTX bulut işleme özelliğiyle birleştirerek yalnızca cihaz ve internet bağlantısıyla mekansal bilgi işlem deneyimleri sunuyor.

Bu bulut tabanlı yaklaşım, gerçek zamanlı, fiziksel tabanlı işlemelerin Apple Vision Pro’ya sorunsuz bir şekilde aktarılmasına olanak tanıyarak, devasa mühendislik doğruluğuna sahip veri kümelerinin ayrıntılarından ödün vermeden yüksek doğrulukta görseller sunar.

Vision Products Group başkan yardımcısı Mike Rockwell şunları söyledi: “Apple Vision Pro’nun çığır açan ultra yüksek çözünürlüklü ekranları, Nvidia hızlandırılmış bilgi işlemden aktarılan OpenUSD içeriğinin fotogerçekçi görüntülenmesiyle birleştiğinde, sürükleyici deneyimlerin geliştirilmesi için inanılmaz bir fırsatın kilidini açıyor.” Apple’da bir açıklamada. “Uzaysal bilgi işlem, tasarımcıların ve geliştiricilerin büyüleyici dijital içerik oluşturma şeklini yeniden tanımlayacak ve yeni bir yaratıcılık ve katılım çağını başlatacak.”

“Apple Vision Pro, kurumsal müşterilerin
Çalışmalarını taviz vermeden gerçekleştiriyoruz” dedi Lebaredian. “Müşterilerimizin bu harika araçlara erişmesini sabırsızlıkla bekliyoruz.”

İş akışı aynı zamanda cihazda yerel ve uzak işlemeyi birleştiren çığır açan bir teknik olan hibrit işlemeyi de sunuyor. Kullanıcılar, GDN’den akış sağlayan Omniverse RTX Renderer ile Apple’ın yerel SwiftUI ve Reality Kit’inden tek bir uygulamada tamamen etkileşimli deneyimler sunabilirler.

130’dan fazla ülkede mevcut olan Nvidia GDN, sorunsuz, yüksek kaliteli, etkileşimli deneyimler sunmak için Nvidia’nın küresel buluttan uca akış altyapısından yararlanıyor. Kullanıcılar, ağır işlem görevlerini GDN’ye taşıyarak, veri kümesinin boyutu veya karmaşıklığı ne olursa olsun, en zorlu işleme kullanım durumlarının üstesinden gelebilir.

Uygulamalar arasında uzamsal bilgi işlem iş yüklerinin iyileştirilmesi

Omniverse tabanlı iş akışı, çok çeşitli kullanım durumları için potansiyel gösterdi. Örneğin tasarımcılar, kalite kaybı veya model kaybı olmadan 3 boyutlu verilerini tam aslına uygun olarak görmek için teknolojiyi kullanabilirler.

Bu, tasarımcıların gerçek fiziksel ürün gibi görünen ve davranan güvenilir simülasyonlarla etkileşime girebileceği anlamına gelir. Bu aynı zamanda e-ticaret deneyimleri için yeni kanallar ve fırsatlar da açıyor. Endüstriyel ortamlarda, fabrika planlamacıları tüm mühendislik fabrikası veri kümelerini görüntüleyebilir ve bunlarla etkileşime girebilir, böylece iş akışlarını optimize etmelerine ve potansiyel darboğazları tespit etmelerine olanak tanır.

Nvidia, geliştiriciler ve bağımsız yazılım satıcıları için, uygulamalarında mevcut verilerle sorunsuz bir şekilde etkileşimde bulunmak üzere Apple Vision Pro’daki yerel araçları kullanmalarına olanak tanıyacak yetenekler geliştiriyor.