Princeton Üniversitesi’nden bilim adamları, “çizgileri bulanıklaştırmaya” çalışan sanal dünya ve fiziksel dünya, kullanıcıların sanal nesneleri seçmelerine izin veren bir VR-Robot arayüzü geliştirdi. dijital ortam ve eşdeğer gerçek dünya nesnesinin ‘sihirli bir şekilde’ kendilerine gerçek zamanlı olarak görünmez bir robot tarafından teslim edilmesini sağlayın.
Dublajlı Gerçeklik Sözleri: Görünmez Mobil Robotlar aracılığıyla karışık gerçeklikte sanal-fiziksel ayrıştırma yanılsamalarıYeni proje, özellikle uzak konumlardaki insanlar için uzaktan işyerini ve kişisel işbirliklerini geliştirmeyi amaçlıyor. . karışık gerçeklik Arayüz ayrıca tamamen yeni formları sağlayabilir etkileşimli eğlence ve oyun Bu sorunsuz bir şekilde Sanal ve fiziksel dünyaları harmanlayıntamamen yeni bir deneyim sunmak.
Araştırmacılar, “Fiziksel manipülasyon modundan sanal manipülasyon modlarını ayırarak, gerçeklik vaatleri, büyülü güçler veya fantastik yaratıklar kullanarak fiziksel sahneyi anında manipüle etme yanılsamasını yaratıyor” diye yazıyor.
Sanal gerçeklik ve fiziksel dünya arasındaki çizgileri bulanıklaştırmak
Bir e -postayla BilgilendirmePrinceton Yardımcısı Bilgisayar Bilimi Profesörü Parastoo Abtahi, bu teknolojinin insanların fiziksel dünyayla nasıl etkileşime girdiğini “temelden değiştirebileceğini” söyledi çünkü “artık etkileşimlerimizdeki fiziksel gerçeklik yasalarıyla sınırlı değiliz”.
Profesör ayrıca doktora sonrası araştırma görevlisi ve proje lideri Mohamed Kari ve meslektaşlarının, fiziksel olarak bulundukları odanın dijital bir şekilde gösterildiğini, odadaki nesnelerle etkileşime girebileceğini, onları neredeyse topladığını ve yeni bir yere yerleştirdiğini gösterdikleri bir video iletti. Kullanıcı sanal nesneyi yeni bir konuma yerleştirdikten sonra, dijital ortam, bir geri sayım saati de dahil olmak üzere nesneyi orada “oluşturmaya” başlar.
“Perde Arkası” segmentinde, video fiziksel dünya robotunun seçilen öğeyi ilk konumundan nasıl topladığını ve yeni konuma taşıdığını gösteriyor. Toplam üç nesne, bir bitki, bir kutu hindistancevizi suyu ve bir tüp cips, neredeyse videoda hareket ettiriliyor. Videoda robot, tıpkı oluşturma zamanlayıcısının süresi dolduğunda üç gerçek dünya nesnesinin teslimatlarını tamamlar.
Özellikle, robot işlem boyunca kulaklık kullanıcısı için görünmez kalır. Bir segmentte, dijital bir arı havada uçarak cipsleri verir. Bir ifade Gerçeklik vaatlerini duyuran Kari, sanal renderden “robotun kendisi bile” tüm gereksiz teknik detayların kaldırılmasının, kullanıcının nesnenin “sihir gibi” hareket ettirildiği yanılsamasını deneyimlemesine izin verdiğini açıkladı.
Abtahi, “Evet, robot aslında son klipste çipi veriyor, aynı zamanda diğer klipslerde bitki ve hindistancevizi suyu da veriyor” dedi. Bilgilendirme. “Hiçbir görüntü teorik değildir.”
https://www.youtube.com/watch?v=sddxvib79j0
Perde arkasında bir göz atın
Video, sanal gerçeklik ve fiziksel dünya arasında nispeten sorunsuz bir arayüz sunsa da, Princeton ekibi deneylerini oluşturmak için birkaç gelişmiş ekipman ve yazılım aracı kullandı. İlk adım, deneyin fiziksel çalışma alanının dijital ikizini oluşturmayı içeriyordu.
Abtahi’ye göre, Kari’nin ekibi bir iPhone 14 Pro kullanarak çevrenin ve nesnelerinin yaklaşık 200 görüntüsünü topladı. Daha sonra cihazı, aynı ortamın yaklaşık 15 saniyelik birkaç video klipini yakalamak için kullandılar.
Ardından, fotoğraflar ve videolar bir bilgisayara yüklendi. Abtahi’ye göre ekip, ham görüntü ve video verilerini taranan gerçek dünya alanına uygun sanal bir çalışma alanına dönüştürmek için 3D Gauss Splatting adlı bir süreç kullanan yazılım araçları kullandı.
Profesör, “MCMC profilini kullanarak Jawset Post Show’da (v0.5.146) Splat’ı eğitiyoruz ve sahneler için 25K Splats ve nesneler için 3K-5K’da Splat sayısını kapatıyoruz” dedi.
Son adım, onları sanal dünyada görünmez hale getirmek için gerçek dünyadan “silmek” içeriyordu.
Ekip sanal ortamlarını yarattıktan sonra, hazır bir streç 3 robot ve Meta Quest 3 sanal gerçeklik kulaklığı elde ettiler. Robotu kontrol etmek için, kullanıcının basit el hareketlerine tepki vermeyi programladılar.
Ekibin ifadesine göre, bu önceden programlanmış jestler robota sanal ortamda seçilen gerçek dünya nesnelerini toplamaya ve bunları istenen yere taşımasına karar verir. Videoda bu, su şişesini, cipsleri ve bitkiyi kullanıcının onları neredeyse düşürdüğü yere teslim etmek anlamına geliyordu. Robot karışık bir gerçeklik ortamında çalıştığı için, araştırmacılar aynı zamanda bir VR kulaklık taktığını da belirtiyor, “bu yüzden nesneleri sanal ortamda nereye yerleştireceğini biliyor.”
Sonraki adımlar, robotu ‘gerçekten görünmez’ yapmak içeriyor
Başarılı gösterilerin ardından Princeton ekibi, sistemin genel performansını potansiyel olarak artırmanın yollarını araştırıyor. Abtahi söyledi Bilgilendirme Robotu, özerk bir şekilde sürmesine ve potansiyel olarak “tüm tarafları yakalamak için” manipüle etmesine izin vererek çevrenin dijital taramasını ve sayısallaştırılmasını “otomatikleştirmek” için robotu kullanmak istediklerini.
Profesör, mevcut versiyonda robotun hayalet bir taslağı görülebileceğinden Bilgilendirme Daha yüksek Splat sayımları ve “pasifle” ile daha iyi renk eşleştirme ile görsel sadakati geliştirmek istiyorlar. Profesör, bu değişikliklerin robotu “gerçekten görünmez” hale getirebileceğini ve sahnedeki nesneleri “fotogeralist” hale getirebileceğini söyledi.
Son olarak, ekip robotun işlevselliğini artırmayı hedefliyor. Abtahi, bunun “düğmelere basma veya sıvılar dökülmesi gibi“ toplama ve yer görevlerinin ötesinde daha zengin manipülasyonları ”keşfetmeyi içereceğini söyledi. Araştırmacı ayrıca ekibin “uzak telepresence ve işbirliği” olasılığı da dahil olmak üzere “belirli uygulamaları keşfetmek” ile ilgilendiğini söyledi.
Kağıt “Gerçeklik Sözleri: Görünmez Mobil Robotlar aracılığıyla karışık gerçeklikte sanal-fiziksel ayrıştırma yanılsamaları“Eylül ayında sunulacak Kullanıcı arayüzü yazılımı ve teknolojisi hakkında ACM Sempozyumu Busan, Kore’de.
Christopher Plain, Debrief’te bir bilim kurgu ve fantezi romancı ve baş bilimi yazarıdır. Onu takip edin ve onunla bağlantı kur X– Kitapları hakkında bilgi edinin plainfiction.comveya doğrudan ona e -posta gönderin [email protected].
