松下PTZ攝像機AW-UE155聯手DisruptAR遠程打造NAB虛擬發布會

時間:2020/06/30 來源:專業視聽網

關鍵詞: 松下、PTZ攝像機、AW-UE155

NAB 2020因新冠病毒大流行而取消了,這對整個廣電行業引起了沖擊。NAB(National Association of Broadcasters)是全球矚目的廣電貿易展,每年在拉斯維加斯舉行,有來自160多個國家的90,000多名與會者。1,600家參展商大多會帶來新產品、新技術。對于許多大型公司來說,甚至要提前半年為NAB進行規劃。

而今年, Panasonic專業影像團隊不得不在很短的時間內琢磨出一些替代方案,以便在家中遠程工作、發送訊息。

在預判NAB有可能取消的日子里,Panasonic團隊開始探索,包括建立一個實體展臺供客戶在線訪問的想法。Panasonic專業影像團隊還與專門創建虛擬制作的DisruptAR首席執行官Paul Lacombe進行了討論。DisruptAR公司專注于虛擬影像領域,并追求降低AR和VR的制作成本。

3月16日,松下美國總部所在的新澤西州正式進入封閉狀態;

3月18日,Lacombe為松下團隊安排了首次演示;

3月20日,NAB 2020正式宣布取消。

時間緊,任務急。

松下技術工程師哈里·帕特爾(Harry Patel)透露:“我們必須在兩個選項之間快速做出決定。第一個是搭建一個實體展位,在符合社交安全距離的規定下展示產品(一次少于10人),還得邀請攝制組。很明顯,這不切實際。但,即使不能走出家門,我們也想做更高品質的展示。因此,關于虛擬直播的提案得到了進一步討論,并于3月底獲得批準?!?

DisruptAR的Paul Lacombe使用Free-D協議在家中進行了虛擬演示。

遠程制作的挑戰

遠程制作并非一個新概念。1982年,導演弗朗西斯·福特·科波拉(Francis Ford Coppola)出色地導演并剪輯了他的電影《舊愛新歡》(One From the Heart),其中的許多場景就是在布景附近的拖車中進行的。但是,全球疫情期間,在家里進行遠程制作則是另一回事。只有使用非常先進的拍攝技術、VR引擎和基于云的應用程序才有可能成功。

對于Panasonic,首要課題是創建清晰的規劃架構,并將口頭和書面溝通轉換為更可視的視頻方式。在以往NAB展會上,銷售人員通常會在展廳與客戶交流,討論用戶的問題及解決方案。營銷經理Jim Wickizer和Racepoint Global公關公司最終統一了規劃方案,并與每位產品經理確認了話題的重點。

Patel和Wickizer從他們的家庭工作室與Lacombe開始進行遠程合作、與主持人Zoe Laiz進行視頻采訪。

“我們所有人都面臨著具有挑戰性的制作環境,但要按時間表進行遠程制作,這絕對是概念上的飛躍?!盠acombe感嘆:“以我的直覺,我知道這可能行得通,但之前從未嘗試過,不免還是有些小緊張?!?

Lacombe將他的20'x 24'車庫改造成工作室。

為了進行遠程記錄,每位產品經理都收到了一臺筆記本電腦、一臺Blue Yeti USB麥克風和一臺松下AW-HE68全高清專業PTZ攝像機。AW-HE68通過以太網和PTZ虛擬USB驅動程序進行連接,并且視頻使用OBS記錄到筆記本電腦中,通過TeamViewer進行遠程控制。

團隊合作

為了進行通信,共享文件,觀看演示、監看遠程拍攝制作,松下采用了Microsoft Teams,這是一個通信和協作平臺。一夜之間,Teams、Zoom、Ring Central等平臺已使人們和企業可以在家中與外界進行相對安全的通信了。

為了查看Lacombe在制作過程中拍攝的內容,Patel使用AV-UHS500切換器輸出,從SDI到USB的轉換器中創建了四分割。

在專業影像視覺系統高級副總裁約翰·貝斯利(John Baisley)開場白的錄制過程中,Patel和Wickizer通過Teams軟件,實時監看并提供指導。通過觀察綠屏和虛擬設置視圖來確認屏幕方向。

在專業影像和視覺系統高級副總裁John Baisley錄制開幕詞時,團隊能夠實時查看Baisley的位置并通過Microsoft Teams提供指導。

“我們還可實時判斷Laiz的站位與虛擬場景是否穿幫,并及時糾正?!?Patel解釋:“在遠程操作過程中,沒有團隊協作就不可能成功?!?

“遠程操作非??帷?Wickizer補充:“我們在波士頓有一個人,Patel和我在新澤西的家中,在西海岸有另一個人。有一次,我女兒來到我們的地下室,問我在做什么。我說‘我們正在進行遠程制作’她真的不敢相信?!?

Free-D和Unreal Engine虛幻引擎

要將逼真的VR Studio整合到現場制作中,捕獲準確的攝像機定位數據至關重要。在預演準備過程中,DisruptAR升級了Free-D驅動程序,該驅動程序順利地將松下4K專業PTZ攝像機AW-UE155(通過免費固件升級,內置Free-D協議)直接導入Unreal Engine虛幻引擎中,這使它能夠輸出平搖/俯仰/變焦/光圈信息。通過IP(UDP)直接從攝像機傳輸到虛擬的實時跟蹤系統,而無需其他傳感器、編碼器。

Lacombe解釋說:“Free-D起源于90年代初,是BBC的一種攝像系統的跟蹤協議。它定義了六個自由度——平搖、俯仰、滾動、XYZ以及視場、變焦和聚焦。這些值將被發送到虛擬渲染引擎并連接到虛擬攝像機,因此您的背景將以每秒60幀的速度實時響應?!?

如Lacombe所講,從《獅子王》到《曼達洛人》,虛幻引擎已被廣泛應用。Lacombe:“這是目前好萊塢普遍采用的底層技術。大部分時間,他們都在使用它作為代理,但目標是‘最終像素'這使得您在屏幕上看到的虛擬場景能夠與現場人物實現同步?!?

Free-D協議定義了六個自由度——平搖、俯仰、滾動、XYZ以及視場、變焦和聚焦。

“虛幻引擎是一種游戲引擎,已應用于其他市場,包括體系結構,CAD可視化,在這種情況下還包括廣播和電影?!?Lacombe:“我們正在使用它來達到更高的真實感,從傳統的DCC工具(如Maya、3D Studio Max、Blender)中獲取資源,并使用NVIDIA顯卡以每秒60幀的速度進行處理,從而為觀眾提供逼真的鏡頭特效,例如綻放,耀斑和散焦。達到每秒60幀的逼真度和渲染所需的‘功力’實際上是由虛幻引擎擔當?!?

在車庫中創建虛擬世界

Lacombe的工作室在他改建的車庫中,面積僅為6乘7.3米,他的工作人員僅需一名助手。至于綠幕,他采用了Pro Cyc 便攜式的。受場地所限,女主持人Laiz只有幾步的走動空間,所以攝像機也要盡可能小型化,這更是讓松下AW-UE155機身靈活、精巧的優勢得到了發揮。

即便在車庫的狹小空間內,也必須按大型工作室的標準來激發潛能。

為了給Laiz補光,Lacombe使用了兩個LED柔光平板燈。他還用一些聚光燈模擬背景氛圍中微紅色光線。

現場,Lacombe使用了兩臺UE155攝像機——左右兩個機位。

現場,Lacombe使用了兩臺UE155攝像機。當Laiz轉向顯示器上的產品經理時,導播會切換到Laiz視線水平的第二臺UE155,以模擬產品經理的視角。視線的匹配是個挑戰,但Lacombe說,只要明確了主持人的位置,就有訣竅可循。

一鍵式制作

對于虛擬場景的設計,Lacombe添加了Panasonic徽標。

根據Lacombe的說法,在創建自己的虛擬空間時,由于在線建筑可視化已普及,因此還有更多3D素材可用。您可以轉到3D庫并查找3D素材或模型,然后根據您的自定義要求進行構建。Lacombe解釋:“您選擇了營銷品牌、顏色、材質。將素材放入其中后,便可用按鈕將墻壁拆除,單擊或四處移動,實時調整顯示器等。在現實世界中,這將花費大量時間和金錢。而在虛擬世界,一旦構建完成,就很容易調整、調用?!?

主持人佐伊·萊茲(Zoe Laiz)就新聞和內容創作采訪了高級產品經理史蒂夫·庫珀曼(Steve Cooperman)。

保持安全距離

憑借數十年的經驗與完善,虛擬制作得到了長足發展。盡管現實布景、虛擬布景在本質上是相通的,但最大的區別是每個人都還是生活在現實空間中。一旦取消了居家隔離條例,遠程制作是否會成為常態還有待考證。

Lacombe說:“有一個原因,就是有人守著KEY,有人看著劇本,有人盯著攝像機的角度和道具……所有這些“崗位”仍需保留,我們只是在嘗試找出遠程執行的最佳方法。目前效果令人滿意,我們都對該系統各部分的順暢匹配、高效整合感到驚喜。

熱門技術探討更多>>

同類產品或技術文章列表更多>>