Išplėstinės realybės parodos: Kaip „Panasonic“ tai padarė nuotoliniu būdu su AR

Turinys:

Anonim

Išplėstinė realybė gelbsti. NAB 2022-2023 atšaukimas dėl COVID-19 pandemijos sukėlė smūgio bangas visoje transliavimo pramonėje. Kasmet Las Vegase rengiama „NAB Show“ yra didžiausia transliacijų prekybos laida, kurioje dalyvauja daugiau nei 90 000 dalyvių iš daugiau nei 160 šalių. Dauguma iš 1600 dalyvių pateikia naujus produktus ir technologijas, o daugeliui didelių kompanijų planuojama iki šešių mėnesių. Per labai trumpą laiką „Panasonic Pro Video“ komanda turėjo sugalvoti alternatyvas, kaip išsiųsti savo žinutę dirbant nuotoliniu būdu iš namų.

Garso įrašas + Vaizdo įrašas + IT. Mūsų redaktoriai yra garso, vaizdo ir IT integravimo ekspertai. Gaukite kasdienių įžvalgų, naujienų ir profesionalių tinklų. Prenumeruokite „Pro AV“ šiandien

Praėjus kelioms dienoms iki „NAB Show“ atšaukimo, „Panasonic“ komanda pradėjo ieškoti alternatyvių renginių variantų, įskaitant idėją pastatyti fizinę būdelę, kurioje klientai galėtų apsilankyti internete. „Panasonic Pro Video“ komanda taip pat diskutavo su Naujosios Anglijos „DisruptAR“ generaliniu direktoriumi Paulu Lacombe'u, kuris specializuojasi kuriant virtualius kūrinius. Po karjeros „General Motors“ karjerą pradėjęs Lacombe'as 30 metų dirbo gamybos pramonėje, pradedant „Silicon Graphics“ 80-ųjų pabaigoje, o tada pats pradėjo užsiimti virtualia produkcija. „DisruptAR“ yra orientuotas į AR ir VR gamybos sąnaudų mažinimą platesnėje rinkoje.

  • „Esports Training Factory“ srautinė infrastruktūra
  • „Citizen Cope“ debiutuoja „Covid-safe“ koncertų erdvėje
  • Nuotolinis mokymasis: kaip priversti nuotolinį orkestrą veikti
  • Geriausios PTZ kameros tiesioginiam srautui

Kovo 16 d. Naujasis Džersis, kuriame įsikūrusi „Panasonic“ JAV būstinė, oficialiai buvo užrakinta; kovo 18 d. Lacombe'as suplanavo pirmąją „Panasonic“ komandos demonstraciją. „NAB Show 2022-2023“ buvo atšaukta kovo 20 d. “

Turėjome labai greitai apsispręsti tarp dviejų variantų “, - atskleidžia„ Panasonic “inžinerijos vadovas Harry Patelis. „Pirmasis variantas pareikalavo fiziškai pastatyti kabiną, atvežti produktą laikantis socialinių distancijų reikalavimų (mažiau nei 10 žmonių vienu metu) ir pritraukti filmavimo grupę. Tai nebuvo praktiška ir norėjome ką nors padaryti kokybiškiau, nors negalėjome palikti savo namų. Taigi pagaliau ši virtualaus renginio idėja buvo aptarta toliau ir buvo patvirtinta iki kovo pabaigos “.

„DistruptAR“ Paulas Lacombe'as, naudodamas „Free-D“ protokolą, virtualiai demonstruoja savo namus.

Išplėstinė realybė ir nuotolinė gamyba

Nuotolinė gamyba nėra nauja koncepcija. Režisierius Francisas Fordas Coppola garsiai režisavo ir redagavo daug savo 1982 m. Filmo „Vienas iš širdies“ scenų iš priekabos, esančios šalia filmavimo aikštelės. Vis dėlto, kuriant produkciją nuotoliniu būdu iš namų per pasaulinę pandemiją, yra kita istorija. Tai buvo įmanoma padaryti tik naudojant pažangiausias fotoaparatų technologijas, VR žaidimų variklius ir debesų programas.

Pirmasis „Panasonic“ tikslas buvo sukurti aiškų pranešimą su žodiniu ir rašytiniu bendravimu, išverstu į labiau vizualų vaizdo formatą. NAB pardavėjai paprastai bendraudavo su klientais parodos aikštelėje ir aptardavo kiekvieno asmens problemų sprendimus. Rinkodaros grupės vadovas Jimas Wickizeris ir P. R. agentūra „Racepoint Global“ sugebėjo pateikti nuoseklią žinią ir kartu su atskirais produktų vadybininkais pristatė tinkamus kalbėjimo taškus.

Patel ir Wickizer taip pat pradėjo dirbti su Lacombe nuotoliniu būdu iš savo namų studijos kurdami vaizdo interviu tarp produktų vadovų ir studijos vedėjos Zoe Laiz, kuri turėjo aptarti naujus produktus ir technologijas. „Mes visi susidūrėme su sudėtinga gamybos aplinka, tačiau tai padaryti nuotoliniu būdu pagal šį tvarkaraštį tikrai buvo tikėjimo šuolis“, - aiškina Lacombe. „Žarnyne žinojau, kad tai gali veikti, bet niekada to nedariau.

Lacombe savo 20 'x 24' garažą pavertė studijos erdve.

Nuotoliniam įrašymui kiekvienas produktų vadybininkas gavo nešiojamąjį kompiuterį, „Blue Yeti“ USB mikrofoną ir „Panasonic AW-HE42 Full-HD Professional PTZ“ kamerą. HE42 buvo prijungtas per Ethernet ir „PTZ Virtual USB Driver“, o vaizdo įrašas buvo įtrauktas į nešiojamąjį kompiuterį naudojant OBS, kad būtų galima įrašyti, o „TeamViewer“ - nuotoliniam valdymui.

Išplėstinės realybės ir MS komandos

Bendravimui, failų dalijimuisi, demonstracinių versijų peržiūrai ir nuotolinės gamybos įrašų stebėjimui „Panasonic“ pasitelkė „Microsoft Teams“ - komunikacijos ir bendradarbiavimo platformą. Per naktį tokios platformos kaip „Teams“, „Zoom“, „Ring Central“ ir daugelis kitų leido žmonėms ir įmonėms saugiai bendrauti su išoriniu pasauliu iš savo namų.

Norėdami pamatyti, ką „Lacombe“ fiksuoja rinkinyje gamybos metu, „Patel“ naudojo „Teams Screen“ dalijimąsi, sukurdamas keturių dalių padalijimą naudodamas AV-UHS500 komutatoriaus išvestį į keitiklio dėžutę iš SDI į USB. USB tiekimas sistemoje „Windows“ buvo pateiktas kaip fotoaparato tiekimas, kurį jie bendrino per „Teams“.

Stebėdami vyresniojo viceprezidento, profesionalių vaizdų ir vaizdinių sistemų John Baisley įžanginių žodžių įrašymą, per „Teams“ Patel ir Wickizer galėjo tiesiogiai pamatyti Baisley svetainę ir pateikti nurodymus, ar tai buvo eilutės skaitymo klaida, ar fono pakeitimas, ar techninis garso problema. Per „Teams“ Patel taip pat galėjo pateikti ekrano kryptį, stebėdamas tiek žaliojo ekrano, tiek virtualių nustatymų rodinius. "Jei Zoey stovėjo tiesiai už durų ir įėjo, mes tikrai galėtume pamatyti, ar kadras buvo geras, ar ne", - paaiškina Patelis. „Aš pasakyčiau Pauliui per„ Teams “:„ Tai gali veikti geriau, jei ji pereis tik šiek tiek teisingai. “Kalbant apie nuotolinį bendradarbiavimą, nemanau, kad tai būtų buvę įmanoma nenaudojant komandų.“

Kol vyresnysis viceprezidentas, profesionalių vaizdų ir vaizdinių sistemų viceprezidentas Johnas Baisley'as įrašė savo atidarymo žodžius, komanda galėjo tiesiogiai pamatyti „Baisley“ kambarį ir pateikti nurodymus per „Microsoft Teams“.

"Buvo labai šaunu tai daryti nuotoliniu būdu", - priduria Wickizer. „Mes turėjome žmogų Bostone, Harry ir aš buvome savo namuose Naujajame Džersyje, o Vakarų pakrantėje turėjome dar vieną žmogų. Mano dukra kartą nusileido į mūsų rūsį ir paklausė, ką aš darau. "Mes darome nuotolinę gamybą", - pasakiau jai. Ji tikrai negalėjo tuo patikėti “.

„Free-D“ ir „Unreal“ variklis

Norint įtraukti realistiškus VR studijos komplektus į tiesioginę produkciją, būtina užfiksuoti tikslius fotoaparato padėties nustatymo duomenis. Prieš pristatydamas savo pirmąją „Panasonic“ demonstracinę versiją, „DisruptAR“ sukūrė „Free-D“ tvarkyklę, kuri leistų „AW-UE150 4K Pro PTZ“ kamerą prijungti tiesiai prie „Unreal“ variklio, o tai suteikė galimybę pateikti „Pan / Tilt / Zoom / Iris“ informaciją per IP (UDP) tiesiai iš fotoaparato į „Unreal“ sekimo sistemą tiesiogiai be papildomų jutiklių ar kodavimo įrenginių.

„Free-D atėjo iš BBC dar 9-ojo dešimtmečio pradžioje kaip vienos iš jų kamerų stebėjimo sistemų stebėjimo protokolas“, - aiškina Lacombe. „Tai apibrėžia šešis laisvės laipsnius - panoramuoti, pakreipti, pasukti, X, Y, Z, taip pat regėjimo lauką, mastelį ir fokusavimą. Šios vertės siunčiamos į virtualaus atvaizdavimo variklį ir prijungiamos prie virtualios kameros, kad jūsų fonas atitinkamai reaguotų 60 kadrų per sekundę greičiu. “

Pasak „Lacombe“, „Unreal“ variklis buvo naudojamas visame pasaulyje daugybėje kūrinių - nuo „Liūto karaliaus“ iki „Mandalorian“. „Tai yra pagrindinė technologija, kurią šiuo metu naudoja dauguma Holivudo“, - sako Lacombe'as. „Jie dažniausiai tai naudoja kaip tarpinį serverį, tačiau tikslas yra„ galutinis taškas “, o tai, ką matote realiuoju laiku, yra tai, kas rodoma ekrane.“

„Free-D“ protokolas apibrėžia šešis laisvės laipsnius - slinkti, pakreipti, sukti XYZ, taip pat regėjimo lauką, mastelį ir fokusą.

„„ Unreal Engine “yra žaidimų variklis, pritaikytas kitose rinkose, įskaitant architektūrą, CAD vizualizaciją ir šiuo atveju transliacijas bei filmus“, - sako Lacombe. „Mes naudojame jį norėdami pasiekti aukščiausią fotorealizmo lygį, pasinaudodami turtais iš tradicinių DCC įrankių, tokių kaip„ Maya “,„ 3D Studio Max “,„ Blender “, naudodami„ NVIDIA “vaizdo plokštes 60 kadrų per sekundę greičiu, žiūrovams suteikdami tikslumą objektyvo savybių, tokių kaip: žydėjimas, liepsnos ir fokusavimas. Kokybė, kurios reikia norint pasiekti fotorealizmą ir perteikti 60 kadrų per sekundę greičiu, yra tai, ką daro „Unreal Engine“. “

Virtualiojo pasaulio kūrimas … garaže

Lacombe studija yra jo pertvarkytame garaže, kurio matmenys yra tik 20 x 24, o jo įgulą sudarė tik vienas asistentas. Žaliam ekranui jis naudojo „Pro Cyc Portable“ foną. Dėl vietos ribotumo „Laiz“ galėjo nueiti tik kelis žingsnius, todėl fotoaparatai buvo riboti, todėl „AW-UE150“ yra puikus įrankis šiam darbui. Apšviesdamas savo žalią ekraną, Lacombe'as naudojo 14 colių LED plokštes. "Idėja yra tai, kad jūs tikrai norite turėti vieną žalią atspalvį ir atsikratyti visų dėmių, kad jūsų raktas galėtų išlaikyti tuos šešėlius", - paaiškina Lacombe. "Jūs pasirenkate vieną žalią spalvą, kurią norite išbraukti, o tamsesni žalumynai yra šešėliai, uždengti jūsų virtualiame rinkinyje."

Nors jis dirbo nedidelėse garažo patalpose, savo talentą turėjo apšviesti motyvuota didelės studijos šviesa. Norėdami apšviesti Laizą, Lacombe'as naudojo dvi šviesos diodų plokštes savo raktui ir užpildui. Jis taip pat panaudojo keletą prožektorių iš viršaus, kad imituotų rausvą šviesą, sklindančią iš langų. „Iš esmės mes stengiamės suderinti tą kryptį ir spalvų temperatūrą, nepaveikdami žalio ekrano“, - atskleidžia Lacombe. „Tai yra iššūkis, nes bandai apšviesti talentą atskirai nuo žalio ekrano. Šių šviesos diodų tvarto durys suteikė mums daugiau vietos, tačiau mes kovojome, kad išsisuktume nuo žalumos ir kuo mažiau atsimuštume į jos drabužius ir odą “.

Komplekte „Lacombe“ naudojo dvi „UE150“ kameras - 1 kamera buvo kairėje, o 2 - dešinėje.

Komplekte „Lacombe“ naudojo dvi „UE150“ kameras: 1 kamera buvo kairėje pusėje, o 2 - dešinėje. Kai Zoe savo ruožtu susidurs su produkto vadybininku, kuris žiūrimas vertikaliame monitoriuje, jis perėjo prie dviejų kamerų „Laiz“ akių lygyje, kad gautų imituotą produkto vadybininko požiūrį. Akių briaunų derinimas yra iššūkis, tačiau Lacombe sako, kad galėtų šiek tiek apgauti, žinodamas, kur yra jo nustatyta namų padėtis. „Jei turėjote dvi kameras, viena buvo 90 laipsnių kampu, o kita - aštuonių pėdų atstumu, o kita - keturių pėdų atstumu, galite matuotis matavimo juosta ir įdėti jas į virtualų pasaulį į tą pačią padėtį. Jie laikysis vienas kito per fizikos dėsnius, kad atrodytų lyg būtų tokioje padėtyje. Ir tada galite šiek tiek apgauti laikydamiesi tų gairių. “

Gamybos dizainas vienu mygtuko paspaudimu

Virtualiojo rinkinio dizainui Lacombe'as panaudojo modifikuotą dizainą, kurį jis praėjusiais metais dirbo su kitu klientu. Dizainas buvo atliktas Mayoje ir eksportuotas į „Unreal“. Kadangi virtualus rinkinys vyksta naktį, jie iš pradžių atrodė tamsiau, bet tada nusprendė jį padaryti ryškesnį. Jis pridėjo „Panasonic“ logotipą ir pasiėmė elementus, kurie nebuvo būtini „Panasonic“ rinkiniui. Jis taip pat pridėjo monitorių, išeinantį iš grindų, kurį Laizas eina iš už jo.

Kuriant savo virtualų rinkinį, pasak „Lacombe“, yra daugiau 3D išteklių, kurie yra prieinami, nes internetinė architektūrinė vizualizacija iš tikrųjų pakilo. Galite nueiti į 3D biblioteką, rasti 3D išteklius ar modelius ir sukurti juos, atsižvelgdami į jūsų pritaikymo reikalavimus. "Tai tikrai yra pirmyn ir atgal su klientu", - paaiškina Lacombe. „Pridedate savo rinkodaros komponentus, prekės ženklą, visas spalvas ir medžiagas. Kai turėsite turtą, vienu mygtuku galite nuversti sienas, spustelėti ar perkelti daiktus, realiuoju laiku sureguliuoti monitorius. „Fiziniame pasaulyje“ tam prireiktų nemažai laiko ir pinigų. Kai pastatysite daiktą, jį bus lengva pritaikyti ir grįžti. “

Vedėja Zoe Laiz interviu su vyresniuoju produktų vadovu Steve'u Coopermanu apie naujienas ir turinio kūrimą.

Laikytis saugaus atstumo

Virtuali gamyba per dešimtmečius vystėsi per patirtį ir tobulinimą. Nors fizinės ir virtualios produkcijos vaidmenys iš esmės yra vienodi, didžiausias skirtumas yra tas, kad visi dirba toje pačioje fizinėje erdvėje. Panaikinus įsakymą „likti namuose“, vis dar nustatoma, ar tikroji nuotolinė gamyba taps norma.

„Yra priežastis, kodėl kažkas žiūri į raktą, kažkas žiūri į scenarijų, kažkas žiūri į kameros kampus ir drabužių spintą“, - sako Lacombe. Visus tuos vaidmenis dar reikia atlikti ir mes tik bandome išsiaiškinti geriausią būdą tai padaryti nuotoliniu būdu. Iki šiol tai pavyko nuostabiai gerai ir mes visi nustebome, kaip tai taip greitai susiklostė ir natūraliai vystėsi. Nors mes turėjome nešioti daugiau skrybėlių daugiau, nei norėtume šiai produkcijai, kitas logiškas žingsnis yra tai dar labiau paskirstyti, kad kiti dalyvautų tobulinant ir tobulinant procesą. Tačiau pirmą kartą už vartų esu labai patenkinta rezultatais ir noriu žengti kitą žingsnį “.

Norėdami žiūrėti virtualų „Panasonic“ renginį, Vaizdo įrašų gamybos ateitis , spustelėkite čia.

Norėdami gauti daugiau informacijos apie „DisruptAR“, apsilankykite www.disruptar.com.