Dzięki stereoskopii koniec, czy hologramy są drogą do prawdziwego 3D? Jeśli tak, jak możesz się zaangażować? Dowiedzmy się.
Ci, którzy głoszą, że trójwymiarowe i oparte na głębi wideo to przyszłość ruchu, często mają własne zainteresowania. Mogą jednak mieć rację, ponieważ bardziej wydajne techniki kompresji i szybsze potoki, takie jak 5G, przygotowują grunt pod wideo 360˚ z dużą ilością danych. W pewnym sensie hologramy to naturalny postęp.
Wolumetria różni się również od przechwytywania ruchu lub wydajności, chociaż obie techniki często współpracują ze sobą i opierają się na pomiarach głębokości.
Mówiąc najprościej, MoCap to przechwytywanie ruchu za pomocą czujników noszonych w garniturze. Wolumetryczne rejestruje wszystko w fizycznym obszarze i generuje informacje 3D za pomocą tak zwanej chmury punktów lub siatki wielokątów 3D. Dane z obu są następnie przekazywane do studiów VFX w celu manipulacji i renderowania.
Istnieją jednak pewne wady logistyczne. Szybkość transmisji danych była co najmniej podwojona w starej stereoskopii (dwa kanały). Kinematografia z większą liczbą klatek na sekundę — w której czasami kręciłeś w 3D — oznaczała jeszcze więcej danych i wydajniejsze plany przechowywania.
Wideo wolumetryczne polega na zanurzeniu i wymaga wielu punktów przechwytywania — zwykle do tworzenia objętości wykorzystuje się ponad 100 kamer, podczerwień i RGB.
W rezultacie przechwytywanie wideo wolumetrycznego może zgromadzić około 16 GB danych na minutę przed edycją czegokolwiek.
Gdzie wideo wolumetryczne wygrywa
Jak wspomniano we wstępie do hologramów, dystrybucja tej nowej formy 3D w przemyśle rozrywkowym nie jest jeszcze utrzymana. Hologramy produktów będą ogromne, zwłaszcza dla smartfonów i innych urządzeń przenośnych.
Na przykład w 2017 roku Barbie zaprezentowała holograficzną lalkę robota, która reaguje na polecenia głosowe. W tym samym roku Verizon i Korea Telecom wykonały pierwsze połączenie holograficzne z wykorzystaniem technologii 5G. Aby połączenie było możliwe, powstały dwa hologramy. Jednak wiele branż rozumie potrzebę czujników odzwierciedlających głębokość; jest jak brakujący składnik, co czyni je bardziej inteligentnymi i bardziej pomocnymi dla ludzi.
Ale w świecie mediów wolumetria obiecuje również zwiększyć wydajność kanałów postprodukcji poprzez uproszczenie procesu przechwytywania i animacji. Podobieństwo aktora, autentyczny występ i garderoba mogą zostać uchwycone w tym samym procesie. Przechwycone dane mogą być używane zarówno do dostarczania Previs, jak i dostarczania w wysokiej rozdzielczości. Przechwyconą wydajność można również wykorzystać w silnikach czasu rzeczywistego, takich jak Unreal i Unity.
Arcturus, producent oprogramowania do edycji i kodowania hologramów, porównał koszty przechwytywania wolumetrycznego z bardziej tradycyjną produkcją VFX CG. Ich badania porównują koszty, czas i poziomy personelu między produkcją VFX a wolumetryczną produkcją wideo.
Na przykład:do tworzenia postaci użycie tradycyjnej grafiki komputerowej może zająć od 10 do 60 dni w przypadku większych filmów. Filmy wolumetryczne mogą tworzyć zasoby ludzkie w mniej niż 24 godziny. Koszty poniesione na CG mogą wynieść nawet 70 000 USD, podczas gdy wolumetryczne wideo dla tej samej operacji może wynosić 15 000 USD.
Rozmiary zespołów są różne, ponieważ 10-20 artystów CG pracuje nad tymi samymi zasobami, podczas gdy wolumetryczne przechwytywanie wideo wymagałoby tylko 2-3 osób do wyprodukowania zasobów. To prowadzi do procesu, który w przypadku CG zwykle trwa tak długo, jak jest wykonywany ręcznie, podczas gdy wolumetria jest zasadniczo ćwiczeniem automatycznym.
Jak zacząć z wolumetrycznym wideo
Być może doświadczyłeś już jakiegoś filmu wolumetrycznego, nawet o tym nie wiedząc. Dla tych z nas, którzy byli i są graczami XBOX, Microsoft w 2010 roku wydał akcesorium o nazwie Kinect. Chodzi o to, aby twoje gesty lub ruchy ciała uwolniły cię od fizycznego kontrolera. Czujniki kamery, w tym detektory podczerwieni, wytworzyły podstawową chmurę punktów głębokości, reprezentującą 20-punktowy szkielet.
W tamtym czasie było to rewolucyjne, ale wydawało się, że nigdy nie przyjęło się, a Microsoft zrezygnował z jego używania w grach w 2017 roku.
Jednak technologia ta jest obecnie sprzedawana w ramach usługi Azure Kinect DK, która wykorzystuje technologię wykrywania wgłębnego dla różnych branż, takich jak opieka zdrowotna, produkcja i handel detaliczny. Ich zestaw rozwojowy jest dostępny za około 400 USD i oferuje kamerę głębi 1 MP, matrycę mikrofonów 360˚, kamerę 12 MP RGB i czujnik orientacji.
Ponieważ głębokość pomiaru staje się bardziej krytyczna dla wszystkich czujników, pojawią się tysiące przypadków użycia, do których zmierza Microsoft z tym produktem.
Przykładem lub przypadkiem użycia jest wypożyczalnia samochodów w USA, która wykorzystuje kamery głębinowe do skanowania zwracanych samochodów w celu sprawdzenia, czy nie ma uszkodzeń ciała. Pojazdy są skanowane po zwrocie, a informacje o głębokości pokażą wszelkie deformacje lub wgniecenia. Ten szybki, automatyczny proces nie musi brać na słowo najemcy dodatkowych wybojów podczas wynajmu.
Firmy takie jak EF EVE mogą wykorzystać dane wyjściowe wielu sensorów Azure Kinect i tworzyć filmy wolumetryczne. Jest to nowa branża usługowa dla firm, które nie mają doświadczenia w wolumetrycznym wideo i nie ma budżetu na dużą ilość miejsca na kamerę.
Inne kamery, takie jak RealSense firmy Intel, również obsługują rosnące zapotrzebowanie na czujniki głębokości. Przypadki użycia to wszystko, od robotyki po autoryzację twarzy. Przygotowują się nawet do interakcji robota z człowiekiem za pomocą ruchu szkieletowego i gestów. „Śledzenie ludzi” dotyczy bardziej ogólnych przypadków użycia, takich jak monitorowanie i analiza tłumu.
Jeśli chcesz zacząć eksperymentować z wolumetrycznym wideo, musisz mieć czujnik głębokości, ale nie tak niezbędny, jak Kinect. Opinia publiczna tak naprawdę nie znała LiDAR, dopóki Apple nie zdecydowało się umieścić czujnika w swoich iPhone'ach od dwunastu modeli.
LiDAR to metoda skanowania laserowego służąca do mierzenia i rejestrowania krajobrazów lub budynków w celu tworzenia skanów 3D i map głębi.
LiDAR tworzy chmury punktów 3D, które uwzględniają każdy punkt w przestrzeni w scenie lub obiekcie. Jeśli porównasz piksele LiDAR z pikselami 2D, czujnik głębokości dodaje informacje o głębokości Z do współrzędnych X i Y.
Firmy takie jak Depthkit oferują oprogramowanie, które pomoże Ci uchwycić Twój iPhone LiDAR lub nawet lepszy aparat za pomocą oddzielnego czujnika głębokości.
Oto pouczający samouczek, jak to zrobić. Poniżej tego filmu znajduje się kilka przykładów od klientów Depthkit.
Przechwytywanie wydajności przez czujniki noszone na ciele, kamery 360˚ dają poczucie głębi, ale teraz wydają się nieco staromodne.
Istnieją jednak inne sposoby na uzyskanie głębi w swoich projektach, na przykład fotogrametria. Wiele zdjęć obiektu jest robionych pod różnymi kątami i łączonych razem przez algorytmy obliczeniowe w celu wygenerowania modeli 3D.
Kamery pola świetlnego wykorzystują również mikrosoczewki, aby następnie manipulować wszystkim, od punktów ogniskowych po oświetlenie.
Przyszłość wolumetrii
Wielu z nas chętnie ogląda lub tworzy w 2D. Kinematografia stereo nigdy tak naprawdę nie odniosła sukcesu i były ku temu dobre powody. Może nie przeszkadza nam płaski film, który mamy od 100 lat. Jednak fakt, że wolumetryczne wideo nie jest uzależnione od sukcesu branży rozrywkowej, da branży kreatywnej czas na dostosowanie się.
Gdy zobaczymy więcej, co może wyprodukować wirtualna produkcja, zwłaszcza z silnikami gier, te nowe typy hologramów dołączą do wirtualnej rewolucji.
Być może poczekaj na skrzydłach, aż będą gotowe.