XR虚拟拍摄是否能够给LED显示屏带来新商机?
XR虚拟拍摄是什么?
最早起源于电影工业的XR虚拟拍摄(Extended Reality Virtual Production)是为了满足对更真实、更具想象力的视觉效果的需求而诞生的。它将真实世界与虚拟现实相结合,通过实时渲染技术在拍摄过程中将虚拟场景与真实演员或实物环境进行互动。它可以在拍摄过程中即时合成虚拟场景,使演员能够实时看到虚拟环境,并与之进行互动。
XR虚拟拍摄使用的技术包括实时渲染、动态光照、深度感知等。实时渲染技术能够即时合成虚拟场景,并与真实画面无缝衔接;动态光照技术保证虚拟场景与真实环境的光线交互更加真实;深度感知技术可以通过感应器捕捉演员的动作,并将其实时应用于虚拟角色之上。
02
XR虚拟拍摄如何实现?
目前,行业内主流XR虚拟拍摄的实现需涉及到一整套技术设备,涵盖led显示屏、LED控制系统、虚拟渲染系统、摄影机及追踪定位系统、同步系统以及其他辅助系统等。凭借以上技术设备。通过实时的工作流程,可将表演者融入到虚拟世界中而无需绿幕及后期制作,并即时输出最终画面。
● LED控制系统
主要承担接收虚拟渲染画面,并输出至LED显示屏,优秀的控制系统需具备高超的视频处理能力、可以对LED屏体进行精确的色彩管理和亮度调节,最大程度的展现出LED屏体应有的显示效果,并且在硬件端对XR的特殊应用需求(如多机位、高帧率等)提供技术支撑。
● 虚拟渲染系统
主要包含媒体服务器和实时渲染引擎,主控媒体服务器主要负责控制渲染引擎,处理摄影机数据,输出LED视频源画面。实时渲染引擎提供虚拟数字资产的整合与制作,搭建完整的虚拟拓展空间。
● 摄像机系统
拍摄现实画面并回传给虚拟渲染系统,需要使用专业级影视摄像机,以实现清晰无损的真实画面采集。一般会使用支持120Hz以上采集帧率的摄像机。
● 追踪定位系统
主要用于定位实现现实摄像机位移及镜头转动数据,定位系统的关键指标是精准度、自由度和低延迟,较常用的有机械追踪(云台、机械臂等)、光学定位,以及其他红外追踪、视觉相机追踪等。
● 同步系统
主要用于XR整体工作流程的基准时间与画面帧,独立而精确的同步系统是XR项目的必要条件,通过同步系统可以有效降低摄像机在拍摄LED屏体时出现的扫描线、黑场等问题,也可以通过控制同步时间搭配LED控制系统实现多机位拍摄效果。
03
国内发展状况
2022年底,工信部等五部门联合印发了《虚拟现实与行业应用融合发展行动计划(2022-2026年)》,明确提出到2026年中国虚拟现实产业总体规模超3500亿元,虚拟现实终端销量超2500万台,在工业、文旅、媒体、教育等重点领域实现突破,打造先锋案例。政策端的持续加码使得XR虚拟拍摄在国内应用驶入快车道。
爱奇艺在去年7月与恒星引力跨越1400公里,从河北大厂运送一批LED屏至浙江横店,搭建了2400平米的虚拟制作棚,屏幕面积264㎡,用于《狐妖小红娘月红篇》的拍摄,《月红篇》也是国内首部尝试应用XR虚拟制作的电视剧。
阿里影业在去年11月与NVIDIA英伟达、虚拟动点、秀狐科技等企业联合发布幻影未来虚拟拍摄计划,面向年轻导演、制作人,开展虚拟拍摄人才培训和人才的扶持;同时推出了帧享数字化制作虚拟拍摄整体解决方案2.0,目前已在北京、厦门、宁波投入使用;今年上半年在北京朝阳也落地了国内功能最全的大型数字化制作基地,占地超过4000平米,共有四个棚,服务能力覆盖3D、XR、动捕、绿幕等。
随着虚拟拍摄技术的迅速发展,众多LED厂商纷纷入局,XR虚拟拍摄成为各厂商重点布局的新赛道,随着企业的不断赋能以及产品与技术的升级,也将推动基于LED屏的虚拟制作技术的普及应用。
深圳市晶台股份有限公司作为高端显示LED器件研发与制造企业,在上个月的UDE2023第四届国际半导体显示博览会上携旗下“虚拟XR显示LED方案”亮相。
虚拟XR显示LED是晶台应用于XR虚拟制作领域的定制LED产品方案,以黑科技加持,对比度大幅提升30%,让细节更清晰,带来更逼真的沉浸式视觉体验;同时采用灯珠大视角设计,功能区一字型结构,扩大显示视角,有利于打造360度全景式LED虚拟影棚;2000nit以上高亮度加低功耗,为虚拟制作降本增效。
UDE2023展商之一利亚德在智能显示、XR虚拟拍摄等领域的全球领先地位,2023年4月25日,由利亚德集团与秀加科技联合投资打造,长沙先进的影视级虚拟拍摄影棚--马栏山虚拟制作基地正式启动。
*马栏山虚拟制作基地
近年来,作为全球最早提供影视级动作捕捉技术解决方案的公司之一,也是唯一可以同时提供影视预演(动捕系统)和XR虚拟拍摄(LED系统)核心解决方案的中国企业,利亚德集团以及旗下虚拟动点、德火科技,持续打磨产品,完善技术,为迪士尼、美国NBC电视台、长影集团、腾讯、爱奇艺等国内外影视娱乐制作商提供XR虚拟制作技术和产品,并制作了一批经典案例。
UDE2023展商之一BOE MLED XR技术解决方案为用户提供卓越的画面呈现和拍摄体验。在屏幕方面,采用了超黑材质黑灯,与面罩设计高度融合,带来更高的对比度和更好的画面质量,可实现更加沉浸式的体验。同时,还实现了7680hz的行业刷新率和1/8scan的扫描率,以及160°超高视角和宽色域,支持HDR等多项功能,让用户能够享受到更加出色的拍摄效果和多样化的拍摄角度选择。
在UDE2023上吸引海内外众多观众买家的诺瓦星云也早早布局XR虚拟拍摄领域,其“XR虚拟拍摄LED控制系统解决方案”,针对虚拟拍摄的专项功能设计和独具优势的画质提升技术,可有效解决拍摄扫描线、显示画面偏色及细节丢失等问题,让显示画面细节更清晰、色彩更精准,拍摄画面无瑕疵,打造能完全媲美真实光影影的拍摄场景,真实实现所拍既所得。
除此之外,诺瓦星云在UDE2023展会现场带来从视频处理到显示控制的全链路解决方案。针对MLED显示特性设计,诺瓦星云MX40 Pro控制系统+A10s Pro高画质接收卡,搭配MLED核心芯片,赋予显示屏更好像素。
TU系列播控处理器:LED主控、视频处理器、播放盒、人机交互,TU系列多合一智能播控处理设备一机全能,轻松搞定显示屏带载及应用。
H系列视频拼接器:拼接处理和视频控制二合一,光口输出带载高达4.16亿像素,极大简化系统架构,至繁归简,重塑新视界。
XR虚拟拍摄技术作为近几年快速发展的新兴技术,XR+LED显示屏具有显著的优点,在未来技术快速迭代和需求创新的内在驱动下,XR虚拟拍摄+LED显示解决方案或将成为影视制作领域冉冉升起的新星。
UDE2024第五届国际半导体显示博览会将继续聚焦XR虚拟拍摄、Mini/Micro LED、OLED、激光显示、微显示、裸眼3D等技术,推动XR技术解决方案先进硬件设备和丰富内容支持,促进实现出色的画面呈现和拍摄体验,助力各行各业实现更好的沉浸式体验和效果。
同时重点打造智慧显示、创新应用、Mini/Micro LED、关键设备、性能材料、泛半导体智慧工厂六大板块,推出集前沿技术展示与商贸一体化综合平台。2024年2月26日至28日,我们在深圳福田会展中心不见不散!