Rozšírená realita na záchranu. Zrušenie NAB 2022-2023 v dôsledku pandémie COVID-19 spôsobilo šokové vlny v celom vysielacom priemysle. NAB Show, ktorá sa koná každoročne v Las Vegas, je najväčšou vysielacou výstavou s viac ako 90 000 účastníkmi z viac ako 160 krajín. Väčšina z 1 600 vystavovateľov uvádza na trh nové produkty a technológie a pre mnoho veľkých spoločností sa realizuje až šesťmesačné plánovanie. Tím Panasonic Pro Video musel vo veľmi krátkom čase prísť s alternatívami, ako dostať jeho správu von pri práci na diaľku z domu.
Audio + Video + IT. Naši redaktori sú odborníkmi na integráciu zvuku, videa a IT. Získajte denné prehľady, správy a profesionálne siete. Predplaťte si Pro AV ešte dnes
V dňoch pred zrušením NAB Show začal tím Panasonic hľadať možnosti, ako uskutočniť náhradnú akciu, vrátane myšlienky vybudovať fyzický stánok, kde by zákazníci mohli navštíviť online. Tím Panasonic Pro Video rokoval aj s Paulom Lacombom, výkonným riaditeľom spoločnosti DisruptAR v Novom Anglicku, ktorá sa špecializuje na vytváranie virtuálnych produkcií. Po začatí kariéry v spoločnosti General Motors po vysokej škole pracoval Lacombe vo výrobnom priemysle už 30 rokov, počnúc koncom 80. rokov v spoločnosti Silicon Graphics, až potom sa začal venovať virtuálnej produkcii. DisruptAR sa zameriava na zníženie výrobných nákladov na AR a VR na širšom trhu.
- Streamovacia infraštruktúra Esports Training Factory
- Citizen Cope debutuje v koncertnom priestore bezpečnom pre Covid
- Diaľkové učenie: Ako zabezpečiť fungovanie vzdialeného orchestra
- Najlepšie kamery PTZ na živé vysielanie
16. marca sa New Jersey, kde sídli americké ústredie spoločnosti Panasonic, oficiálne uzavrela; na 18. marca Lacombe naplánoval prvé demo pre tím Panasonic. NAB Show 2022-2023 bola 20. marca zrušená. “
Museli sme sa veľmi rýchlo rozhodnúť medzi týmito dvoma možnosťami, “prezrádza technický manažér spoločnosti Panasonic Harry Patel. „Prvá možnosť si vyžadovala fyzické vybudovanie stánku, uvedenie produktu pri dodržaní sociálnych dištančných požiadaviek (menej ako 10 ľudí naraz) a zapojenie filmového štábu. Nebolo to praktické a chceli sme robiť niečo kvalitnejšie, aj keď sme nemohli opustiť svoje domovy. Takže nakoniec sa o tejto myšlienke virtuálnej udalosti diskutovalo ďalej a bola schválená do konca marca. “
Rozšírená realita a vzdialená výroba
Diaľková výroba nie je nový koncept. Režisér Francis Ford Coppola slávne zrežíroval a zostrihal mnoho scén zo svojho filmu Jeden zo srdca z roku 1982 z upútavky na scénu. Ale vytváranie výroby na diaľku z domu počas globálnej pandémie je iný príbeh. Bolo to možné len pomocou najmodernejších technológií fotoaparátov, herných engine VR a cloudových aplikácií.
Pre spoločnosť Panasonic bolo prvým cieľom vytvorenie jasnej správy s verbálnou a písomnou komunikáciou preloženou do vizuálnejšieho video formátu. V spoločnosti NAB obvykle obchodníci komunikovali so zákazníkmi na výstavnej ploche a diskutovali o riešeniach problémov každej osoby. Manažér marketingovej skupiny Jim Wickizer a agentúra P.R., Racepoint Global, boli schopní prísť s konzistentným posolstvom a spolupracovali s jednotlivými produktovými manažérmi na predstavení správnych bodov rozhovoru.
Patel a Wickizer tiež začali spolupracovať s Lacombe na diaľku z jeho domáceho štúdia na vytváraní videorozhovorov medzi produktovými manažérmi a hostiteľkou štúdia Zoe Laiz, ktorí mali diskutovať o nových produktoch a technológiách. „Všetci sme mali náročné produkčné prostredia, ale urobiť to na diaľku s týmto harmonogramom, bol to určite skok viery,“ vysvetľuje Lacombe. "V útrobách som vedel, že to môže fungovať, ale nikdy predtým som to neurobil ako starosť."
Na diaľkové nahrávanie dostali všetci produktoví manažéri notebook, mikrofón USB Blue Yeti a profesionálnu kameru PTZ Panasonic AW-HE42 Full-HD. HE42 bol pripojený cez Ethernet a PTZ Virtual USB Driver a video bolo prenesené do notebooku pomocou OBS na nahrávanie a TeamViewer na diaľkové ovládanie.
Tímy rozšírenej reality a MS
Na komunikáciu, zdieľanie súborov, prezeranie ukážok a sledovanie vzdialených produkčných natáčaní spoločnosť Panasonic použila platformu pre komunikáciu a spoluprácu Microsoft Teams. Platformy ako Teams, Zoom, Ring Central a mnoho ďalších umožnili ľuďom a podnikom cez noc bezpečne komunikovať s okolitým svetom z ich domovov.
Na sledovanie toho, čo Lacombe zachytával na scéne počas výroby, použil Patel zdieľanie Teams Screen a vytvoril štvornásobné rozdelenie pomocou výstupu prepínača AV-UHS500 na prevodník z SDI na USB. Zdroj USB bol vo Windows predstavený ako zdroj fotoaparátu, ktorý zdieľali prostredníctvom tímov.
Počas dohľadu nad nahrávaním hlavného viceprezidenta pre profesionálne zobrazovacie a vizuálne systémy John Baisley na úvodné poznámky prostredníctvom tímov mohli Patel a Wickizer naživo vidieť obývaciu izbu Baisleyho a poskytnúť smer, či už išlo o chybu pri čítaní riadku, zmenu pozadia alebo technický stav. zvukový problém. Prostredníctvom tímov mohol Patel tiež poskytnúť smer obrazovky sledovaním zelenej obrazovky aj zobrazení virtuálnej sady. "Keby Zoey stála priamo za dverami a vstúpila, mohli by sme skutočne zistiť, či je záber dobrý alebo nie," vysvetľuje Patel. „Povedal by som Paulovi prostredníctvom tímov:„ Mohlo by to fungovať lepšie, keby sa posunula o niečo správne. “Pokiaľ ide o spoluprácu na diaľku, nemyslím si, že by to bolo možné bez použitia tímov.“
"Bolo to super, robiť to na diaľku," dodáva Wickizer. "Mali sme osobu v Bostone, Harry a ja sme boli v našich domovoch v New Jersey a mali sme ďalšiu osobu na západnom pobreží." Moja dcéra raz zostúpila do nášho suterénu a spýtala sa, čo robím. „Robíme produkciu na diaľku,“ povedal som jej. Skutočne tomu nemohla uveriť. “
Free-D a Unreal Engine
Ak chcete do živej produkcie začleniť realistické štúdiové súpravy VR, je nevyhnutné zachytiť presné údaje o polohe kamery. Pred predstavením svojej prvej ukážky pre Panasonic vyvinul DisruptAR ovládač Free-D, ktorý umožňoval zapojenie kamery PTZ AW-UE150 4K Pro priamo do Unreal Engine, čo mu poskytovalo možnosť výstupu informácií o Pan / Tilt / Zoom / Iris cez IP (UDP) priamo z kamery do sledovacieho systému Unreal naživo bez potreby ďalších senzorov alebo kódovacích zariadení.
„Free-D pochádza z BBC začiatkom 90. rokov ako sledovací protokol pre jeden z ich kamerových sledovacích systémov,“ vysvetľuje Lacombe. „Definuje šesť stupňov voľnosti - pan, tilt, roll, X, Y, Z, ako aj zorné pole, zväčšenie a zaostrenie. Tieto hodnoty sa odošlú do virtuálneho vykresľovacieho modulu a spoja sa s virtuálnou kamerou, takže vaše pozadie bude zodpovedajúcim spôsobom reagovať v reálnom čase rýchlosťou 60 snímok za sekundu. “
Podľa Lacombeho sa Unreal Engine používal celoplošne pri mnohých produkciách - od Levieho kráľa po Mandaloriana. „Je to základná technológia, ktorú momentálne používa väčšina Hollywoodu,“ hovorí Lacombe. „Väčšinou ho používajú ako server proxy, ale cieľom je„ konečný pixel “, ktorý je na obrazovke čokoľvek, čo vidíte, nástup v reálnom čase.“
„Unreal Engine je herný engine, ktorý sa uplatňuje na iných trhoch, vrátane architektúry, vizualizácie CAD, v tomto prípade vysielania a filmu,“ hovorí Lacombe. „Používame ho na dosiahnutie najvyššej úrovne fotorealizmu, pričom využívame prostriedky z tradičných nástrojov DCC, ako sú Maya, 3D Studio Max, Blender, používame grafické karty NVIDIA rýchlosťou 60 snímok za sekundu, čo dáva divákom vernosť charakteristík objektívu, ako sú kvitnúce, svetlice a odostrenie. Kvalita, ktorú potrebujete na to, aby ste sa dostali k fotorealizmu a vykresľovaniu rýchlosťou 60 snímok za sekundu, je v podstate to, čo robí Unreal Engine. “
Vytvorenie virtuálneho sveta … v garáži
Lacombeho štúdio je v jeho prerobenej garáži, ktorá má rozmery iba 20 x 24 a jeho posádku tvoril iba jeden asistent. Pre zelenú obrazovku použil pozadie Pro Cyc Portable. Z dôvodu priestorových obmedzení mohol Laiz prejsť iba pár krokov, takže boli obmedzené na fotoaparáty, čo z AW-UE150 urobilo perfektný nástroj pre túto prácu. Na osvetlenie svojej zelenej obrazovky použil Lacombe 14 ”LED panely. "Myšlienkou je, že naozaj chcete mať jeden odtieň zelenej a zbaviť sa všetkej fľakatosti, aby váš keyer tieto tiene udržal," vysvetľuje Lacombe. "Vyberiete jednu zelenú, ktorú chcete označiť, a tmavšie zelené sú tiene prekryté vo vašej virtuálnej súprave."
Aj napriek tomu, že pracoval v obmedzenej garáži, musel svoj talent osvetliť motivovaným svetlom veľkého štúdia. Na rozsvietenie Laiz použil Lacombe dva LED panely pre svoj kľúč aj výplň. Použil tiež niekoľko reflektorov zhora, aby simuloval červenkasté svetlo prichádzajúce z okien. „V zásade sa snažíme zosúladiť tento smer a túto farebnú teplotu bez toho, aby sme ovplyvnili zelenú obrazovku,“ prezrádza Lacombe. "To je výzva, pretože sa snažíte osvetliť talent oddelene od zelenej obrazovky." Dvere stodoly na týchto LED diódach nám dávali väčší priestor, ale bojovali sme, aby sme sa dostali preč od zelenej a minimálne sa odrazili od zelenej na jej oblečenie a pokožku. “
Pri natáčaní použil Lacombe dva fotoaparáty UE150: fotoaparát 1 bol na ľavej strane a fotoaparát 2 na pravej strane. Keď sa Zoe otočila tvárou v tvár produktovému manažérovi pozorovanému na vertikálnom monitore, prepol na kameru dva v Laizovej úrovni očí, aby získal simulovaný produktový manažér. Zladiť očné viečka je výzva, ale Lacombe tvrdí, že by ich mohol trochu podviesť, pretože vedel, kde je jeho nastavená domáca pozícia. "Ak ste mali dve kamery, jedna mala 90 stupňov a druhá bola vo vzdialenosti 8 stôp a druhá je štyri stopy, môžete merať pomocou pásky a umiestniť ich do virtuálneho sveta v rovnakej polohe." Budú sa navzájom držať prostredníctvom fyzikálnych zákonov, aby vyzerali, akoby boli v tejto presnej polohe. A potom môžete v rámci týchto pokynov trochu podvádzať. “
Produkčný dizajn jediným kliknutím
Na návrh virtuálnej súpravy použil Lacombe upravený návrh, ktorý minulý rok pracoval s iným klientom. Dizajn bol urobený v Maye a exportovaný do Unrealu. Keďže sa virtuálna súprava odohráva v noci, mali najskôr tmavší vzhľad, ale potom sa rozhodli, že ju zosvetlia dotykom. Pridal logo Panasonic a odniesol si prvky, ktoré pre sadu Panasonic neboli nevyhnutné. Pridal tiež monitor, ktorý vychádza z podlahy a spoza nej vychádza Laiz.
Pri vytváraní vlastnej virtuálnej sady je podľa Lacombe k dispozícii viac 3D prvkov, pretože online architektonická vizualizácia sa skutočne rozbehla. Môžete ísť do 3D knižnice, vyhľadať 3D podklady alebo modely a zostaviť ich podľa toho, aké sú vaše požiadavky na prispôsobenie. „S klientom je to skutočne tam a späť,“ vysvetľuje Lacombe. „Pridáte svoje marketingové komponenty, značky, všetky farby a materiály. Keď už máte majetok v sebe, môžete pomocou tlačidla strhávať steny, klikať alebo presúvať veci, upravovať monitory všetko v reálnom čase. Vo „fyzickom svete“ by to vyžadovalo značné množstvo času a peňazí. Keď máte vec postavenú, je ľahké ju upraviť a vrátiť sa k nej. “
Udržiavanie bezpečnej vzdialenosti
Virtuálna výroba sa v priebehu desaťročí vyvíjala na základe skúseností a zdokonaľovania. Aj keď sú úlohy fyzickej a virtuálnej produkcie v podstate rovnaké, najväčší rozdiel je v tom, že všetci pracujú v rovnakom fyzickom priestore. Po zrušení vyhlášky „zostať doma“ sa ešte stále určuje, či sa pravá diaľková výroba stane normou alebo nie.
„Existuje dôvod, prečo sa niekto pozerá na kľúč, niekto pozerá na scenár, niekto sa pozerá na uhly kamery a šatník,“ hovorí Lacombe. Všetky tieto úlohy musia byť ešte splnené a my sa len snažíme nájsť najlepší spôsob, ako to urobiť na diaľku. Zatiaľ to vyšlo úžasne dobre a všetci sme prekvapení, ako sa to tak rýchlo spojilo a vyvíjalo prirodzeným spôsobom. Aj keď sme pri tejto výrobe museli nosiť viac klobúkov, ako by sme si želali, ďalším logickým krokom je ich ďalšie rozdelenie, aby boli do vylepšenia a vylepšenia procesu zapojené aj ďalšie. Ale prvýkrát z brány som veľmi spokojný s výsledkami a túžim ho posunúť k ďalšiemu kroku. “
Ak chcete sledovať virtuálnu udalosť spoločnosti Panasonic, Budúcnosť videoprodukcie , preklikajte sa sem.
Viac informácií o DisruptAR nájdete na www.disruptar.com.