Utvidet virkelighet til unnsetning. Kanselleringen av NAB 2022-2023 på grunn av COVID-19-pandemien sendte sjokkbølger i hele kringkastingsbransjen. NAB Show holdes årlig i Las Vegas, og er den største kringkastingsmessen med over 90 000 deltakere fra over 160 land. Flertallet av de 1600 utstillerne lanserer nye produkter og teknologi, og for mange store selskaper er opptil seks måneders planlegging på plass. I løpet av et veldig kort tidsvindu måtte Panasonic Pro Video-teamet komme med alternativer for å få ut meldingen mens de jobbet eksternt hjemmefra.
Audio + Video + IT. Våre redaktører er eksperter på å integrere lyd, video og IT. Få daglig innsikt, nyheter og profesjonelt nettverk. Abonner på Pro AV Today
I dagene frem til kanselleringen av NAB Show begynte Panasonic-teamet å se på muligheter for å gjøre et erstatningsarrangement, inkludert ideen om å bygge en fysisk messe hvor kunder kunne besøke online. Panasonic Pro Video-teamet var også i diskusjoner med Paul Lacombe, administrerende direktør i New England-baserte DisruptAR, som spesialiserer seg i å lage virtuelle produksjoner. Etter å ha startet sin karriere hos General Motors etter college, har Lacombe jobbet i produksjonsindustrien i 30 år, og begynte på Silicon Graphics på slutten av 80-tallet før han gikk alene for å drive virtuelle produksjoner. DisruptAR er fokusert på å få ned AR og VR-produksjonskostnader for det bredere markedet.
- Esports Training Factory streaming infrastruktur
- Citizen Cope debuterer med konsertplass for Covid-safe
- Fjernlæring: Hvordan få et fjernorkester til å fungere
- Beste PTZ-kameraer for live streaming
16. mars gikk New Jersey, der Panasonics amerikanske hovedkvarter er basert, offisielt i låsing; 18. mars planla Lacombe den første demoen for Panasonic-teamet. NAB Show 2022-2023 ble avlyst 20. mars. “
Vi måtte bestemme mellom de to alternativene veldig raskt, avslører Panasonic ingeniørleder Harry Patel. “Det første alternativet krevde fysisk å bygge en messe, bringe inn produktet mens man fulgte sosiale distanseringskrav (færre enn 10 personer om gangen) og bringe inn et filmteam. Det var ikke praktisk, og vi ønsket å gjøre noe med høyere kvalitet, selv om vi ikke kunne forlate hjemmene våre. Så til slutt ble denne ideen om et virtuelt arrangement diskutert videre og ble godkjent innen utgangen av mars. "
Augmented Reality og Remote Production
Fjernproduksjon er ikke et nytt konsept. Regissør Francis Ford Coppola regisserte og redigerte mange scener fra sin film fra 1982, One From the Heart, fra en trailer nær settet. Men å lage en produksjon eksternt hjemmefra under en global pandemi er en annen historie. Det var bare mulig ved å bruke toppmoderne kamerateknologi, VR-spillmotorer og skybaserte apper.
For Panasonic var det første målet å skape en klar melding med verbal og skriftlig kommunikasjon oversatt til et mer visuelt videoformat. På NAB vil selgere vanligvis kommunisere med kunder på utstillingsgulvet og diskutere løsninger på hver persons problemer. Markedsføringsgruppesjef Jim Wickizer og P.R. byrå, Racepoint Global, var i stand til å komme med en konsistent melding og jobbet med individuelle produktsjefer for å presentere de riktige snakkepunktene.
Patel og Wickizer begynte også å samarbeide med Lacombe eksternt fra hjemmestudioet for å lage videointervjuer mellom produktsjefer og en studiovert, Zoe Laiz, som skulle diskutere nye produkter og teknologi. "Vi har alle hatt utfordrende produksjonsmiljøer, men for å gjøre dette eksternt med denne tidsplanen, var det absolutt et sprang av tro," forklarer Lacombe. "I tarmen visste jeg at dette kunne fungere, men det hadde aldri vært noe å bekymre meg om å ha gjort det før."
For ekstern opptak mottok hver produktsjef en bærbar PC, en blå Yeti USB-mikrofon og et Panasonic AW-HE42 Full-HD Professional PTZ-kamera. HE42 ble koblet til via Ethernet og PTZ Virtual USB Driver, og videoen ble brakt inn i den bærbare datamaskinen ved hjelp av OBS for å ta opp og TeamViewer for fjernkontroll.
Augmented Reality og MS Teams
For kommunikasjon, deling av filer, visning av demoer og overvåking av eksterne produksjonsskudd, ansatte Panasonic Microsoft Teams, en kommunikasjons- og samarbeidsplattform. Over natten har plattformer som Teams, Zoom, Ring Central og mange andre tillatt mennesker og bedrifter å kommunisere trygt med omverdenen hjemmefra.
For å se hva Lacombe fanget på settet under produksjonen, brukte Patel Teams Screen share og skapte en quad split ved hjelp av en AV-UHS500 switcher-utgang til en omformerboks fra SDI til USB. USB-feedet ble presentert i Windows som en kameramat, som de delte via Teams.
Mens de hadde tilsyn med innspillingen av Senior Vice President, Professional Imaging & Visual Systems, John Baisleys åpningsanmerkninger, gjennom Teams, var Patel og Wickizer i stand til å se Baisleys stue live og gi retning om det var en linjelesefeil, en bakgrunnendring eller en teknisk lydproblem. Gjennom Teams kunne Patel også gi skjermretning ved å observere både grønn skjerm og virtuelle settvisninger. "Hvis Zoey sto rett bak en dør og kom inn, kunne vi virkelig se om skuddet var bra eller ikke," forklarer Patel. "Jeg vil si til Paul gjennom Teams:" Det kan fungere bedre hvis hun beveger seg litt over riktig. "Når det gjelder eksternt samarbeid, tror jeg ikke det hadde vært mulig uten bruk av Teams."
"Det var ganske kult å gjøre dette eksternt," legger Wickizer til. “Vi hadde en person i Boston, Harry og jeg var hjemme hos oss i New Jersey, og vi hadde en annen person på vestkysten. Datteren min kom ned til kjelleren vår en gang og spurte hva jeg gjorde. ‘Vi lager en fjernproduksjon,’ sa jeg til henne. Hun kunne virkelig ikke tro det. ”
Free-D og Unreal Engine
For å innlemme realistiske VR studio-sett i en live produksjon, er det viktig å fange nøyaktige kameraposisjonsdata. Før han presenterte sin første demo for Panasonic, utviklet DisruptAR en Free-D-driver som gjorde det mulig å koble AW-UE150 4K Pro PTZ-kamera direkte til Unreal Engine, noe som ga ham muligheten til å sende ut Pan / Tilt / Zoom / Iris-informasjon. via IP (UDP) direkte fra kameraet til Unreals sporingssystem live uten behov for ekstra sensorer eller kodere.
"Free-D kom fra BBC på begynnelsen av 90-tallet som en sporingsprotokoll for et av deres kamerasporingssystemer," forklarer Lacombe. “Den definerer de seks frihetsgradene - panorering, tilt, rull, X, Y, Z, samt synsfelt, zoom og fokus. Disse verdiene sendes ned til den virtuelle gjengivelsesmotoren og kobles til et virtuelt kamera, slik at bakgrunnen din reagerer tilsvarende i sanntid med 60 bilder per sekund. ”
I følge Lacombe har Unreal Engine blitt brukt over hele linja i mange produksjoner - fra The Lion King til The Mandalorian. "Det er den underliggende teknologien som brukes av det meste av Hollywood akkurat nå," sier Lacombe. "De bruker det som en fullmektig for det meste, men målet er" endelig piksel ", som er det du ser i sanntid er det som er oppe på skjermen."
"Unreal Engine er en spillmotor som har blitt brukt i andre markeder, inkludert arkitektur, CAD-visualisering og i dette tilfellet kringkasting og film," sier Lacombe. “Vi bruker det for å komme til det høyeste nivået av fotorealisme, og tar eiendeler fra tradisjonelle DCC-verktøy som Maya, 3D Studio Max, Blender, og bruker NVIDIA-grafikkort med 60 bilder per sekund, noe som gir seerne troskapen til objektivegenskaper som blomstring, bluss og avfokusering. Kvaliteten du trenger for å få fotorealisme og gjengivelse med 60 bilder per sekund, er egentlig det Unreal Engine gjør. ”
Skape en virtuell verden … i en garasje
Lacombes studio er i hans ombygde garasje som bare måler 20 x 24, og mannskapet hans besto av bare en assistent. For den grønne skjermen brukte han en Pro Cyc Portable bakgrunn. På grunn av plassbegrensningene, kunne Laiz bare gå noen få trinn, så de var begrenset på kameraer, noe som gjorde AW-UE150 til det perfekte verktøyet for jobben. Lacombe brukte 14 ”LED-paneler når han belyste den grønne skjermen. "Tanken er at du virkelig vil ha en nyanse av grønt og bli kvitt all spottiness, slik at keyer kan beholde disse skyggene," forklarer Lacombe. "Du velger en green som du ønsker å nøkkel ut, og de mørkere greenene er skyggene som er lagt i ditt virtuelle sett."
Selv om han jobbet i de små rommene i garasjen sin, måtte han tenne talentet sitt med det motiverte lyset fra et stort studio. For å lyse på Laiz, brukte Lacombe to LED-paneler til både nøkkelen og fyllingen. Han brukte også noen spotlights ovenfra for å simulere et rødlig lys som kom fra vinduene. "I utgangspunktet prøver vi å matche den retningen og den fargetemperaturen mens vi ikke påvirker den grønne skjermen," avslører Lacombe. “Det er en utfordring fordi du prøver å tenne talentet atskilt fra den grønne skjermen. Låvedørene på disse lysdiodene ga oss mer rom, men vi kjempet for å komme vekk fra det grønne og få minimal sprett av det grønne på klærne og huden. ”
På settet brukte Lacombe to UE150-kameraer: kamera 1 var på venstre side og kamera 2 til høyre. Når Zoe vendte seg mot en produktsjef sett på en vertikal skjerm, byttet han til kamera to i øyehøyde for Laiz for å få et simulert synspunkt på produktleder. Matchende øyelinjer er en utfordring, men Lacombe sier at han kan jukse det litt ved å vite hvor hans hjemmeposisjon var. “Hvis du hadde to kameraer, det ene var 90 grader til det andre på åtte meter unna, og det andre var fire meter unna, kan du måle med et målebånd og plassere dem i den virtuelle verden i samme posisjon. De vil følge hverandre gjennom fysikkens lover slik at de ser ut som de er i den nøyaktige posisjonen. Og så kan du jukse litt innenfor disse retningslinjene. ”
Produksjonsdesign ved å klikke på en knapp
For utformingen av det virtuelle settet brukte Lacombe et modifisert design som han jobbet med en annen klient det siste året. Designet ble gjort i Maya og eksportert til Unreal. Siden det virtuelle settet finner sted om natten, så de først et mørkere utseende, men så bestemte de seg for å gjøre det til et lysere preg. Han la til Panasonic-logoen og tok bort elementer som ikke var essensielle for Panasonic-settet. Han la også til en skjerm som kommer ut av gulvet som Laiz går ut bak.
I løpet av å lage ditt eget virtuelle sett, ifølge Lacombe, er det flere 3D-eiendeler som er tilgjengelige siden online arkitektonisk visualisering virkelig har tatt av. Du kan gå til et 3D-bibliotek og finne 3D-eiendeler eller modeller og bygge det avhengig av hva dine tilpasningskrav er. "Det er virkelig frem og tilbake med klienten," forklarer Lacombe. “Du legger til markedsføringskomponenter, merkevarebygging, alle farger og materialer. Når du har eiendelen der inne, kan du ta ned vegger med en knapp, klikke eller flytte ting rundt, justere skjermer alt i sanntid. I den 'fysiske verden' vil dette ta betydelig tid og penger. Når du har bygd tingen, er det lett å justere og komme tilbake til. ”
Holde en trygg avstand
Virtuell produksjon har utviklet seg gjennom tiårene gjennom erfaring og forbedring. Selv om rollene til en fysisk produksjon og en virtuell produksjon i det vesentlige er de samme, er den største forskjellen at alle jobber i samme fysiske rom. Når hjemmeforordningen er opphevet, bestemmes det fortsatt om ekte ekstern produksjon vil bli normen.
"Det er en grunn til at du har noen som ser på nøkkelen, noen som ser på manuset, noen som ser på kameravinklene og garderoben," sier Lacombe. Alle disse rollene må fortsatt oppfylles, og vi prøver bare å finne ut den beste måten å gjøre det eksternt. Så langt har det fungert utrolig bra, og vi er alle overrasket over hvordan dette kom sammen så raskt og utviklet seg på en naturlig måte. Selv om vi måtte ha på oss flere hatter enn vi hadde ønsket for denne produksjonen, er det neste logiske trinnet å distribuere dette ytterligere for å få andre involvert til å forbedre og forbedre prosessen. Men for første gang ut av porten er jeg veldig fornøyd med resultatene og ivrig etter å ta det til neste trinn. "
For å se Panasonics virtuelle arrangement, Fremtiden for videoproduksjon , klikk deg gjennom her.
For mer informasjon om DisruptAR, besøk www.disruptar.com.