Chcesz skanować w Gaussian Splats? Quest 3 z Meta Hyperscape Cię zaskoczy

Hyperscape na Meta Quest 3 okazuje się najlepszym narzędziem do skanowania 3D w Gaussian Splats

Gogle VR Meta Quest 3 kojarzone są przede wszystkim jako konsola do gier. Oczywiście, istnieje też dobrze rozwinięta biznesowa strona VR – sprzedaż do szkół, instytucji i firm, które wykorzystują gogle w edukacji, szkoleniach czy prezentacjach. Ale czy ktoś spodziewał się, że staną się one również jedną z najlepszych kamer 3D na rynku?

Nie żartuje. Meta Hyperscape sprawiło, że moja szczęka wylądowała na ziemi. Ale od początku – co to za oprogramowanie?

Meta Hyperscape to funkcja gogli VR stworzona przez firmę Meta, która umożliwia skanowanie i odtwarzanie trójwymiarowych modeli różnych przestrzeni – od pokoi, przez domy i mieszkania, aż po otwarte przestrzenie na zewnątrz (o czym opowiem w dalszej części artykułu). Oprogramowanie zostało zapowiedziane już rok temu podczas Meta Connect 2024, jednak dopiero na tegorocznym wydarzeniu udostępniono możliwość samodzielnego tworzenia skanów. Wcześniej można było jedynie oglądać kilka gotowych, wcześniej przygotowanych przykładów.

Jak to działa?

Skanowanie z Meta Hyperscape jest niezwykle proste. Wystarczy pobrać darmową aplikację Meta Hyperscape Capture ze sklepu Horizon na goglach, a podczas skanowania mieć dostęp do internetu. Sam proces skanowania trwa od 4 do 20 minut (w zależności od wielkości pomieszczenia), a aplikacja prowadzi nas krok po kroku, pokazując, co i w jaki sposób skanować.

Po zakończeniu skanowania gogle muszą pozostać włączone na czas przesyłania danych do chmury. Czas wysyłki zależy od wielkości skanu oraz prędkości internetu. Przesył można jednak wstrzymać i wznowić w dowolnym momencie, np. wtedy, gdy znajdziemy się w miejscu z lepszym połączeniem.

Następnie skan trafia na serwery Mety, gdzie jest przetwarzany. Proces ten odbywa się całkowicie w chmurze, więc gogle można wyłączyć i spokojnie poczekać. Firma deklaruje, że całość zajmuje maksymalnie 8 godzin.

Efekt końcowy? Powala na kolana. To najlepszy skan 3D w technologii Gaussian Splats, jaki miałem okazję zobaczyć. Będąc w zupełnie innym pomieszczeniu, miałem wrażenie, jakbym faktycznie przeniósł się do zeskanowanego pokoju. Jakość wizualizacji zależy od prędkości internetu – ponieważ wszystko działa w chmurze i skan nie jest pobierany lokalnie. Przy łączu Wi-Fi 150 Mb/s rezultat był jednak imponujący.

Największe zaskoczenia

Po opiniach z internetu spodziewałem się, że skany będą wyglądać dobrze, ale mimo to zostałem bardzo pozytywnie zaskoczony. Meta ostrzega użytkowników: „nie próbuj siadać na wirtualnych siedzeniach, bo mogą wydawać się zbyt realistyczne” – i muszę przyznać, że przestałem traktować ten komunikat z przymrużeniem oka. Niektóre elementy wyglądają tak przekonująco, że ktoś naprawdę mógłby się pomylić.

Jeszcze większym zaskoczeniem były dla mnie odbicia. Podczas skanowania przechodziłem obok lustra, więc naturalnie spodziewałem się zobaczyć w nim rozmazane fragmenty własnej sylwetki (w końcu byłem w ciągłym ruchu). Ku mojemu zdumieniu nie znalazłem w odbiciu ani jednej części siebie. Meta musiała opracować algorytmy, które inteligentnie eliminują użytkownika z lustrzanych powierzchni.

Podobnie jest w przypadku skanowania nóg czy rąk – one również nie pojawiają się w gotowym modelu.

Inni użytkownicy testowali także skanowanie przestrzeni na zewnątrz. Sam jeszcze tego nie próbowałem, ale z dostępnych przykładów wynika, że efekt jest imponujący. Szczególnie dobrze odwzorowane są obiekty znajdujące się bardzo daleko – potrafią być zeskanowane nawet z odległości kilku kilometrów.

 

Niedociągnięcia

Skan nie jest idealny – choć częściowo wynika to z błędów samego użytkownika. W moim przypadku elementy, którym nie poświęciłem wystarczająco dużo uwagi, wyszły rozmazane lub z widocznymi artefaktami. Podczas tworzenia skanu trzeba dokładnie obejrzeć obiekty z każdej możliwej perspektywy, inaczej efekt końcowy będzie nierówny.

Dobrze widać to na poniższym przykładzie:

Kiedy zeskanowałem pudełko od góry, napis pozostał wyraźny.

Z dołu jednak nie przyjrzałem się mu dokładnie, przez co napis stał się niewyraźny.

Potencjalne zastosowania

Możliwości wykorzystania Meta Hyperscape jest naprawdę sporo. To świetne narzędzie do odwiedzania nostalgicznych miejsc i przeżywania wspomnień z innymi – zwłaszcza że skany z Hyperscape będą dostępne w Meta Horizon Worlds, gdzie można je zwiedzać wspólnie ze znajomymi.

Wyobrażam sobie również, że tego typu technologia mogłaby okazać się niezwykle przydatna w badaniach miejsc zbrodni. Wraz z dalszym rozwojem oprogramowania i poprawą jakości skanów, możliwe będzie tworzenie niemal perfekcyjnie odwzorowanych scen, które pozwolą na symulację zdarzeń i analizę przebiegu wydarzeń także zdalnie.

Dla biznesu? Architekci i biura nieruchomości z pewnością docenią potencjał Meta Hyperscape. Dokładne zeskanowanie mieszkania lub domu i późniejsze odtwarzanie go podczas prezentacji – nawet w zupełnie innym miejscu na świecie – to ogromne ułatwienie. Na ten moment pojawia się jednak problem: Meta Hyperscape wymaga stałego i szybkiego połączenia z internetem, co nie zawsze jest możliwe. Rozwiązaniem byłaby opcja pobrania skanów bezpośrednio na urządzenie.

Dla mnie osobiście to już moment, w którym przestaję mówić: „będę z tego korzystał, kiedy będzie lepsze i szybsze”. Ten moment właśnie nadszedł – z przyjemnością będę skanował miejsca ważne dla mnie osobiście i wracał do nich w VR. Czekam jednak z niecierpliwością na funkcje wieloosobowe i możliwość eksportu skanów, aby móc korzystać z nich także na innych platformach.