NCAM
关于Ncam
Ncam专注于为媒体与娱乐行业开发增强现实技术,Ncam的核心技术为一套专门为影视制作行业开发的无极限的虚拟和增强的摄像机跟踪图形技术解决方案。该系统使用安装到摄影机的轻量级感应杆对跟踪环境内的自然标记点进行识别跟踪,跟踪过程可任意自由进行机位移动,同时生成极其精确的位置信息与旋转信息的连续数据流。通过NCAM强大且灵活的SDK,跟踪数据可支持所有目前业界标准的图形引擎。
Ncam屡获殊荣的技术曾被应用于:
电视直播:秋季国际橄榄球(BSkyB),NFC冠军赛(Fox Sports),周一足球之夜(ESPN),X Games(ESPN),德甲(Sky Deutschland),FIFA世界杯2014(SWR & ZDF),第四十八届超级碗橄榄球(Fox Sports),Daytona(Fox Sports)。
电影:复仇者联盟:奥创时代(奇迹),木星上行(华纳兄弟),明日边缘(华纳兄弟),白宫坠落(哥伦比亚),机器人帝国(2015,英)
电影虚拟制作系统用实时图形技术(就是现场硬件GPU 渲染)的技术,在拍摄现场,通过虚拟摄影机,给导演一个画面,传统的游戏和电影视效预览方法只能提供粗糙的角色表现,使创作人员能够捕捉、编辑、播放和导出到脱机 3D 应用程序,并输出为任何分辨率的视频,这类内容也可以发布到虚拟现实平台。
使用了实时电影虚拟制作技术,可以按最终渲染质量实时观察数字角色的面部表情、光照、视觉效果和设置的每一个细节。他们没有采用靠捕捉制作影片的办法,而是使用虚幻引擎 4 的强大工具 Sequencer 将一切内容以 3D 数据的形式直接渲染到引擎中。当然,你一样可以使用 行业标准工具 Autodesk Motionbuilder作为您的工作流。
通过实时的摄影机跟踪系统,在拍摄的同时直接提供匹配现场的虚拟场景元素和CGI元素的融合。
Ncam是由一套多传感器摄像头组件和一个服务器系统相连。传感摄像头组件可以快速、简单的附加到任何类型的摄影机上,无论是手持,斯坦尼康,dolly或升降摇臂上。Ncam可以灵活的同时工作在多个摄影机上,只需要很少的时间就可以完成系统匹配。Ncam不需要任何特殊的基准点或跟踪标记,自动跟踪场景环境。重要的是。这意味着不需要调整场景设置就可以让Ncam工作。
Ncam Reality电影摄影机跟踪及次世代增强现实系统独有应用优势分析说明
系统独有优势:
- 支持与任何已有摄影机系统的连接-斯坦尼康,手持,各种底座,摇臂,甚至是Spidercam系统等等
- 超高效的系统Setup和初始化跟踪速度-1秒内即可立刻进行位置跟踪
- 对环境没有使用限制及要求-对工作空间没有限制,可在户外及室内自由工作
- 多传感器融合跟踪技术-基于充分的理解3D空间的底层技术
- 兼容所有的实时渲染引擎-通过Ncam SDK支持工业标准协议
- 冗余安全性-Ncam系统采用多传感器技术提供连续且稳定的跟踪。混合了多种传感器的跟踪技术内置自动化的故障转移保证跟踪的连续及稳定。极限情况如光学传感器受阻情况下,跟踪还是连续进行的。
- 使用寿命-Ncam分阶段按照模块化授权方式,提供超越基础跟踪之外的功能:深度感知及Re-lighting等即将加入的重大功能模块。
- 模块化实时渲染插件-现已支持Unreal及Unity
- 摄影机位置移动信息实时记录并可输出为FBX格式,可用于近线/离线后期制作。
- 全局点云协调系统保证相同的基础点云数据。
Ncam Reality 在电影《独立日2》中的应用超过90%的特效镜头
Ncam小巧玲珑
Ncam的传感器定位在摄像机上,用来在摄像机上测量定位3 D空间中的所有功能。因此系统可以按照摄像机的移动运动来跟踪,在取景器内可以准确地追踪数字虚拟元素的位置给导演直接审查拍摄所得结果。元素可能包括动画角色、道具和实拍和虚拟内容扩展。在监视窗口临时组合这些元素使它更容易组合取景和设计相机运动。它还提醒视效总监他们需要捕获拍摄后什么样的数据。
Ncam的全球合作伙伴可以为客户帮助部署系统和提供服务。在《独立日2》中,他们的洛杉矶合作伙伴cineverse起了关键作用,Ncam通常提供一到二人去现场团队当操作员和助理。“Ncam的体积是小的而不引人注目。”Kingsley说。“所有的设备都安装在一个直立的跟踪服务器小车内。而操的技术人员可以方便的一直在摄像机旁边提供协助,比如镜头和身体变化、以及平台将用于下一个拍摄环境中”。
Ncam服务器输出的VFX虚拟内容和真人实拍的复合画面实时回传到摄像机的监视窗口。反过来,同样的复合画面可以分发给在地板上的任何监看设备。这样,摄影师不仅看到他的工作的实时结果,整个生产过程中都有一个直观的视觉参考,因此让人可以更好的理解导演试图达到的每个设定什么是结果。
Ncam 在现场
“虚拟生产还需要各部门的支持。任何现场的工作流程都有一个学习曲线,每个人到导演必须要适应。真正理解掌握它需要和耐心,但是一旦接受了,就可以马上感受到虚拟生产的优势。”
Kingsley 说:“这样在各种不同时间空间拍摄视效序列的电影中往往是复杂冗长的,并且使用Ncam系统生产真的是一个不错的选择。它不依赖于在一定的条件下,可以在任何时间任何地方工作,在室内或室外、白天、晚上、雾、雨天气等等。因为Ncam精准快速它不会导致延误进度,无论决定生产拍摄什么,摄影师都能看到最终结果。这真的无论是要拍摄一个简单动态镜头还是需要设置扩展内容的复杂镜头。”
N-cam被Emmerich广泛使用在现场。导演每天的工作都与数字特效总监Marion有着密切的联系。据估计,N-Cam用于约90%的视效镜头!“我们实际上早已广泛使用N-cam在《惊天危机》中,每个人都更希望利用它在这部电影。Roland就是喜欢它可以看到最后制作会是什么样子,它能做什么。”Engel评论道。“所以我们立即决定想再做一次。让它在技术上取得了质的飞跃。”
Ncam的操作者与整个团队达成一个良好的工作关系是至关重要。在与各部门合作中,视效团队专门创建的CG内容将被跟踪,无需花很多时间在培训上。“清晰与艺术家沟通是至关重要的。从准备环境和内容之前,在现场拍摄期间匹配虚拟环境链接动画角色完美实时互动的工作流程将是Roland的愿景所在。”Kingsley说 。
在《独立日2》中,Ncam系统在现场拍摄中用于显示动画。“来说说我们在影片中51区的大机库戏份制作吧。”Engel 说:“我们有几十架喷气战斗机升空。Roland想拍摄到机库飞出的战斗机中演员的面部特写。实际上是在他的监视器上看到的。 N-Cam的两人小组和数字特效主管Marion是负责这部分现场与监督的。”处理MotionBuilder的工作中,Marion将设置关键帧直接给Emmerich看,他可以监看到虚拟元素分离。他们能够使用两个摄像头,所以他们的A和B摄像机都与N-Cam同时运行。”Engel说。
拥有这种能力来生成现场实时动画意味着如果Emmerich临时想出了一个新想法,他只会说:“开始使用新的资产,团队将有大约15分钟的序列和实拍再匹配。”Engel说。这使得导演意图更准确地表现,也显示什么内容是后期制作的。