Lisätyn todellisuuden näyttely: Kuinka Panasonic teki sen etänä AR: n kanssa

Lisätty todellisuus pelastaa. NAB 2022-2023: n peruutus COVID-19-pandemian takia aiheutti iskuaaltoja koko lähetysalalla. Vuosittain Las Vegasissa pidettävä NAB Show on suurin lähetyskaupanäyttely, johon osallistuu yli 90 000 osallistujaa yli 160 maasta. Suurin osa 1600 näytteilleasettajasta tuo markkinoille uusia tuotteita ja tekniikkaa, ja monille suurille yrityksille suunnitellaan jopa kuusi kuukautta. Hyvin lyhyessä ajassa Panasonic Pro Video -tiimin oli keksittävä vaihtoehtoja viestin saamiseksi etätyöstä kotoa.

Ääni + Video + IT. Toimittajamme ovat asiantuntijoita audio-, video- ja tietotekniikan integroinnissa. Hanki päivittäisiä oivalluksia, uutisia ja ammattimaista verkostoitumista. Tilaa Pro AV tänään

NAB-näyttelyn peruuttamista edeltävinä päivinä Panasonic-tiimi alkoi etsiä vaihtoehtoja korvaavan tapahtuman tekemiseen, mukaan lukien ajatus rakentaa fyysinen koppi, jossa asiakkaat voivat käydä verkossa. Panasonic Pro Video -tiimi keskusteli myös virtuaalituotteiden luomiseen erikoistuneesta New Englandissa sijaitsevan DisruptAR: n toimitusjohtaja Paul Lacombesta. Aloitettuaan uransa General Motorsissa yliopiston jälkeen Lacombe on työskennellyt tuotantoteollisuudessa 30 vuotta Silicon Graphics -yrityksestä 80-luvun lopulla, ennen kuin hän yrittää yksin harjoittaa virtuaalituotantoa. DisruptAR keskittyy vähentämään AR- ja VR-tuotantokustannuksia laajemmalla markkinalla.

  • Esports Training Factory-suoratoistoinfrastruktuuri
  • Citizen Cope esittelee Covid-safe -konserttitilan
  • Etäopetus: Kuinka saada orkesteri toimimaan
  • Parhaat PTZ-kamerat suoratoistoa varten

New Jersey, jossa Panasonicin Yhdysvaltain pääkonttori sijaitsee, meni virallisesti 16. maaliskuuta. 18. maaliskuuta Lacombe suunnitteli ensimmäisen esittelyn Panasonic-tiimille. NAB Show 2022-2023 peruutettiin 20. maaliskuuta. “

Meidän oli päätettävä kahden vaihtoehdon välillä hyvin nopeasti ”, kertoo Panasonicin suunnittelupäällikkö Harry Patel. "Ensimmäinen vaihtoehto vaati fyysisen kopin rakentamisen, tuotteen tuomisen noudattaen sosiaalisia etäisyyttä koskevia vaatimuksia (alle 10 henkilöä kerrallaan) ja kuvausryhmän tuomista. Se ei ollut käytännöllistä ja halusimme tehdä jotain laadukkaammin, vaikka emme voineet poistua kodeistamme. Lopuksi tästä virtuaalitapahtuman ideasta keskusteltiin edelleen ja se hyväksyttiin maaliskuun loppuun mennessä. "

Häiritse AR: n Paul Lacombe tekemällä virtuaalidemoa kotoa Free-D-protokollan avulla.

Lisätty todellisuus ja etätuotanto

Etätuotanto ei ole uusi käsite. Ohjaaja Francis Ford Coppola tunnetusti ohjasi ja editoi monia kohtauksia 1982-elokuvastaan ​​Yksi sydämestä, lähellä elokuvan traileria. Mutta tuotannon luominen kotoa etänä maailmanlaajuisen pandemian aikana on toinen tarina. Se oli mahdollista vain käyttämällä uusinta kameratekniikkaa, VR-pelimoottoreita ja pilvipohjaisia ​​sovelluksia.

Panasonicin ensimmäinen tavoite oli luoda selkeä viesti, jossa suullinen ja kirjallinen viestintä käännettiin visuaalisemmaksi videoformaatiksi. NAB: ssä myyjät kommunikoivat tyypillisesti näyttelytilassa olevien asiakkaiden kanssa keskustelemalla ratkaisuista kunkin henkilön ongelmiin. Markkinointiryhmän johtaja Jim Wickizer ja P.R.-toimisto, Racepoint Global, pystyivät keksimään johdonmukaisen viestin ja työskentelivät yksittäisten tuotepäälliköiden kanssa esittämään oikeat keskustelupisteet.

Patel ja Wickizer alkoivat myös työskennellä Lacomben kanssa etätyössä kotistudiosta luodakseen videohaastatteluja tuotepäälliköiden ja studio-isännän Zoe Laizin välille, joiden oli tarkoitus keskustella uusista tuotteista ja tekniikasta. "Meillä kaikilla on ollut haastavia tuotantoympäristöjä, mutta se, että teimme tämän etänä tämän aikataulun mukaisesti, oli ehdottomasti harppaus uskosta", Lacombe selittää. "Suolissani tiesin, että tämä voi toimia, mutta koskaan ennen tekeminen oli huolestuttavaa."

Lacombe muutti 20 x 24 tuuman autotallin studiotilaksi.

Kukin tuotepäällikkö sai etätallennusta varten kannettavan tietokoneen, Blue Yeti USB -mikrofonin ja Panasonic AW-HE42 Full-HD Professional PTZ -kameran. HE42 liitettiin Ethernetin ja PTZ Virtual USB -ohjaimen kautta ja video tuotiin kannettavaan tietokoneeseen OBS: n avulla tallentamaan ja TeamViewer kaukosäätimeen.

Lisätyn todellisuuden ja MS-joukkueet

Panasonic käytti viestintää, tiedostojen jakamista, esittelyjen katselua ja etätuotantovälineiden seurantaa viestintä- ja yhteistyöalustana Microsoft Teams. Yön yli, foorumit, kuten Teams, Zoom, Ring Central ja monet muut, ovat antaneet ihmisille ja yrityksille mahdollisuuden kommunikoida ulkomaailman kanssa turvallisesti kodeistaan.

Tarkastellakseen, mitä Lacombe sieppasi tuotannon aikana, Patel käytti Teams Screen -jakoa ja loi nelijakauman käyttämällä AV-UHS500-kytkimen lähtöä muunninlaatikkoon SDI: stä USB: hen. USB-syöte esitettiin Windowsissa kameran syötteenä, jonka he jakoivat Teamsin kautta.

Valvottaessaan kuvankäsittely- ja visuaalijärjestelmien varatoimitusjohtaja John Baisleyn aloituspuheenvuoroja, Patel ja Wickizer pystyivät Teamsin välityksellä katsomaan Baisleyn olohuonetta suorana ja antamaan suunnan olipa kyseessä rivinlukuvirhe, taustamuutos vai tekninen ääniongelma. Joukkueiden kautta Patel pystyi myös tarjoamaan näytön suunnan tarkkailemalla sekä vihreää näyttöä että virtuaalisesti asetettuja näkymiä. "Jos Zoey seisoisi oven takana ja menisi sisään, voisimme todella nähdä, oliko laukaus hyvä vai ei", Patel kertoo. "Sanoisin Paulille joukkueiden kautta:" Se saattaa toimia paremmin, jos hän siirtyy vain hiukan oikealle. "Etäyhteistyön kannalta en usko, että se olisi ollut mahdollista ilman joukkueiden käyttöä."

Ammattikuvaus- ja visuaalijärjestelmien varatoimitusjohtaja John Baisley nauhoitti avauspuheenvuorojaan, mutta joukkue pystyi katsomaan Baisleyn olohuonetta suorana ja tarjoamaan ohjeita Microsoft Teamsin kautta.

"Oli aika siistiä tehdä tämä etänä", lisää Wickizer. "Meillä oli henkilö Bostonissa, Harry ja minä olimme kodeissamme New Jerseyssä ja meillä oli toinen henkilö länsirannikolla. Tyttäreni tuli kerran kellariin ja kysyi mitä tein. "Teemme etätuotantoa", sanoin hänelle. Hän ei todellakaan voinut uskoa sitä. "

Free-D ja epärealistinen moottori

Jotta realistiset VR-studiosarjat voidaan yhdistää live-tuotantoon, tarkan kameran paikannustietojen kaappaaminen on välttämätöntä. Ennen kuin esitteli ensimmäisen demonsa Panasonicille, DisruptAR kehitti Free-D-ohjaimen, joka mahdollisti AW-UE150 4K Pro PTZ -kameran liittämisen suoraan Unreal Engineen, mikä antoi hänelle mahdollisuuden tuottaa Pan / Tilt / Zoom / Iris-tietoja IP: n (UDP) kautta suoraan kamerasta Unrealin seurantajärjestelmään suorana ilman erillisiä antureita tai koodereita.

"Free-D tuli BBC: ltä jo 90-luvun alussa seurantaprotokollana yhdelle kameranseurantajärjestelmästään", Lacombe selittää. ”Siinä määritellään kuusi vapausastetta - panorointi, kallistus, rulla, X, Y, Z sekä näkökenttä, zoomaus ja tarkennus. Nämä arvot lähetetään virtuaaliseen renderointimoottoriin ja liitetään virtuaalikameraan, jotta taustasi reagoi vastaavasti reaaliajassa 60 kuvaa sekunnissa. "

Lacomben mukaan Unreal-moottoria on käytetty kaikkialla monissa tuotannoissa - Leijonakuningasta Mandaloriaan. "Se on taustalla oleva tekniikka, jota suurin osa Hollywoodista käyttää tällä hetkellä", Lacombe sanoo. "He käyttävät sitä suurimmaksi osaksi välityspalvelimeksi, mutta tavoitteena on" viimeinen pikseli ", mikä on mitä näytät reaaliajassa, mikä on näytöllä."

Free-D -protokolla määrittelee kuusi vapausastetta - panorointi, kallistaminen, XYZ: n kääntäminen sekä näkökenttä, zoomaus ja tarkennus.

"Unreal Engine on pelimoottori, jota on käytetty muilla markkinoilla, mukaan lukien arkkitehtuuri, CAD-visualisointi ja tässä tapauksessa lähetys ja elokuvat", Lacombe sanoo. "Käytämme sitä päästäksemme korkeimpaan fotorealismin tasoon ottamalla resursseja perinteisistä DCC-työkaluista, kuten Maya, 3D Studio Max, Blender, käyttämällä NVIDIA-näytönohjaimia 60 kuvaa sekunnissa, mikä antaa katsojille linssiominaisuuksien, kuten kukinta, soihdut ja epätarkennus. Laatu, jonka tarvitset fotorealismiin ja renderöintiin 60 kuvaa sekunnissa, on pohjimmiltaan sitä, mitä Unreal Engine tekee. "

Virtuaalimaailman luominen… autotallissa

Lacomben studio on hänen muunnetussa autotallissa, jonka koko on vain 20 x 24, ja hänen miehistönsä koostui vain yhdestä avustajasta. Vihreälle näytölle hän käytti Pro Cyc Portable -tausta. Tilarajoitusten takia Laiz pystyi kävelemään vain muutaman askeleen, joten kameroissa oli rajallinen määrä, joten AW-UE150 oli täydellinen työkalu työhön. Valaistuaan vihreän näytönsä Lacombe käytti 14 tuuman LED-paneeleja. "Ajatuksena on, että haluat todella saada yhden vihreän sävyn ja päästä eroon kaikista täplistä, jotta avainavain voi pitää nämä varjot", Lacombe selittää. "Valitset yhden vihreän, jonka haluat avata, ja tummemmat vihreät ovat virtuaalisettiisi varjoja."

Vaikka hän työskenteli autotallinsa pienissä tiloissa, hänen täytyi valaista kykyjään suuren studion motivoituneella valolla. Laizin sytyttämiseksi Lacombe käytti kahta LED-paneelia sekä avaimensa että täytteensä. Hän käytti myös muutamia ylhäältä tulevia valonheittimiä simuloimaan ikkunoista tulevaa punertavaa valoa. "Pohjimmiltaan yritämme sovittaa tuon suunnan ja värilämpötilan vaikuttamatta kuitenkaan vihreään näyttöön", Lacombe paljastaa. "Se on haaste, koska yrität sytyttää kykyjä erillään vihreästä näytöstä. Näiden LEDien navetan ovet antoivat meille enemmän tilaa, mutta taistelimme päästäksemme pois vihreästä ja saamasta mahdollisimman vähän vihreää hänen vaatteisiinsa ja ihoonsa. "

Sarjassa Lacombe käytti kahta UE150-kameraa - kamera 1 oli vasemmalla puolella ja kamera 2 oikealla.

Sarjassa Lacombe käytti kahta UE150-kameraa: kamera 1 oli vasemmalla puolella ja kamera 2 oikealla. Kun Zoe kääntyisi kohtaamaan tuotepäällikkö pystysuoralla näytöllä, hän siirtyi kameraan kaksi Laizin silmätasolla saadakseen simuloidun tuotepäällikön näkökulman. Silmälinjojen sovittaminen on haaste, mutta Lacombe sanoo voivansa huijata sitä vähän tietäen, missä hänen asetettu kotiasema oli. "Jos sinulla on kaksi kameraa, toinen oli 90 astetta toiseen kahdeksan metrin päässä ja toinen neljän metrin päässä, voit mitata mittanauhalla ja laittaa ne virtuaalimaailmaan samaan asentoon. He noudattavat toisiaan fysiikan lakien kautta niin, että ne näyttävät olevan tarkassa asemassa. Ja sitten voit huijata vähän näiden ohjeiden puitteissa. "

Tuotannon suunnittelu napin painalluksella

Virtuaalisarjan suunnittelussa Lacombe käytti muokattua mallia, jonka mukaan hän työskenteli toisen asiakkaan kanssa viime vuonna. Suunnittelu tehtiin Mayassa ja vietiin Unrealiin. Koska virtuaalinen sarja tapahtuu yöllä, heillä oli ensin tummempi ilme, mutta sitten he päättivät tehdä siitä kosketuksen kirkkaamman. Hän lisäsi Panasonic-logon ja vei pois elementtejä, jotka eivät olleet välttämättömiä Panasonic-sarjalle. Hän lisäsi myös näytön, joka tulee ulos lattiasta, jonka Laiz kävelee ulos takana.

Luomalla oma virtuaalisarjasi Lacomben mukaan käytettävissä on enemmän 3D-resursseja, koska online-arkkitehtoninen visualisointi on todella alkanut. Voit siirtyä 3D-kirjastoon ja etsiä 3D-resursseja tai malleja ja rakentaa sen sen mukaan, mitkä mukautusvaatimuksesi ovat. "Asiakkaan kanssa on todella edestakaisin", Lacombe selittää. ”Lisät markkinointikomponentit, tuotemerkin, kaikki värit ja materiaalit. Kun sinulla on omaisuus siellä, voit kaataa seinät napilla, napsauttaa tai siirtää asioita ympäriinsä, säätää näyttöjä kaikki reaaliajassa. "Fyysisessä maailmassa" tämä vie huomattavan paljon aikaa ja rahaa. Kun asia on rakennettu, sitä on helppo säätää ja palata siihen. "

Isäntä Zoe Laiz haastattelee vanhempaa tuotepäällikkö Steve Coopermania uutisten ja sisällön luomisesta.

Turvallisen etäisyyden pitäminen

Virtuaalituotanto on kehittynyt vuosikymmenien ajan kokemuksen ja hienostumisen kautta. Vaikka fyysisen tuotannon ja virtuaalisen tuotannon roolit ovat olennaisesti samat, suurin ero on, että kaikki työskentelevät samassa fyysisessä tilassa. Kun kotona pysyminen on kumottu, siitä, tuleeko todellisesta etätuotannosta normi vai ei, vielä päätetään.

"Siellä on syy, miksi joku katsoo avainta, joku käsikirjoitusta, joku kamerakulmia ja vaatekaappia", Lacombe sanoo. Kaikkien näiden roolien on vielä täytyttävä, ja yritämme vain selvittää paras tapa tehdä se etänä. Toistaiseksi se on onnistunut hämmästyttävän hyvin, ja olemme kaikki yllättyneitä siitä, kuinka tämä tuli yhteen niin nopeasti ja kehittyi luonnollisella tavalla. Vaikka meidän piti käyttää enemmän hattuja enemmän kuin olisimme toivoneet tälle tuotannolle, seuraava looginen askel on jakaa tämä edelleen, jotta muutkin osallistuisivat prosessin parantamiseen ja parantamiseen. Mutta ensimmäistä kertaa portista, olen erittäin tyytyväinen tuloksiin ja haluaisin viedä sen seuraavaan vaiheeseen. "

Voit katsella Panasonicin virtuaalitapahtumaa Videotuotannon tulevaisuus , napsauta tätä.

Lisätietoja DisruptARista on osoitteessa www.disruptar.com.

Mielenkiintoisia artikkeleita...