回顾:Skyglass:电影效果相机应用程序
在做直播制作时, 现在很多时候你会看到虚拟背景或背景替代品, 无论是绿幕, 蓝色屏幕, 甚至只是在Teams或Zoom上的背景模糊. 但是现在有一个新工具可以让你做一些相同的运动跟踪用那种视角背景替换就是电影在LED摄影棚中使用的, 就像 所使用的卷 曼德罗瑞. 他们用正在制作的视频代替背景，并跟踪摄像机的运动. 所以当视角改变时投影在人身后的背景也会改变. 你可以用LED音量做到这一点, 但你也可以用绿屏和相机上的跟踪软件来做到这一点. 现在真正的诀窍在于内置追踪功能的手机, 无论是通过使用多个摄像头来评估深度还是 激光雷达 内置在设备本身, 当你移动摄像机的时候进行评估, 不管你把它左右平移, 上下倾斜, 或者把它从一边移到另一边.
订阅Skyglass应用
完全披露，我看到了 Skyglass 在2023年的NAB新闻发布会上提到. 我付了服务费, 我在用它，就像任何终端用户在这个时间点上使用它一样.
成为移动设备上的软件应用程序, 这取决于你有什么设备和我有什么设备, 你的互联网能力，因为它使用实时连接, 以及本视频制作后的后续更新. 它需要每月支付25美元才能使用. 我将使用以太网作为我这里的连接, 所以我有一个以太网适配器，我用苹果电视上的屏幕播放来观看它. 你可以通过Wi-Fi和视频播放实现完全的无线化. 我正试图通过在我的手机上使用以太网连接来提高一点可靠性.
与Skyglass跟踪和键控
当我发射Skyglass时, 它会立即从移动设备输出到你右边的提要. 在视频中，你可以看到我把它举在面前. 当我移动摄像机时, 你可以看到它用相机的传感器跟踪我，评估我移动了多远, 我移动得有多快, 并跟踪背景. 我身后有一个绿幕，但我没有教它使用绿幕. 所以你可以看到我的手和类似的地方有一点错误. 如果你使用绿屏, 你可以让它选择绿屏, 但在这个视频中，它所做的只是对我来说. 如果我离开，我身后没有绿屏，它仍然在做一个干净的键.
如果我教它绿屏，我周围的钥匙就会更干净. 但这样你就被限制在绿屏区域了. 这是手机本身的样子. 你可以看到我在做键. 在右边这里，它说"点击这里切换环境.“你可以在内部录制视频. 您可以使用它进行实时切换. 你还可以看到在我说话和从移动设备返回的视频之间有延迟. 在处理过程中有延迟. 你可以转动摄像头，现在看看后置摄像头，我不在那里. 触摸这个图标, 我们会打开一整套摄像机控制, 包括对焦锁定, 白平衡, 曝光, 补偿, 还有滤色器.
下面是点击绿屏的地方. 你可以看到我的绿屏并不是完全匹配的. 当我到达绿幕的尽头时, 绿屏的结束就是键控的结束. 只有当你使用绿屏模式时才会这样, 你可以得到更好的优势, 但你被限制在绿屏区域. 我们可以把它关掉. 所以这是使用人工智能背景评估，这是延迟的部分原因. 现在，在这里，你可以看到他们的背景，无论是一个很酷的城市景观. 让我把相机转回去. 现在当我上下移动摄像机时, 你可以看到这东西跟踪内置摄像头有多好. 一次又一次, 如果我一直指向上面, 你可以看到我并不是只盯着绿幕看.
选择背景
这东西的追踪能力让我印象深刻. 但你会在直播中使用赛博朋克2032的背景吗? 也许不是，但你并不局限于这些. 你可以做一个城市景观. 我发现这个特别有用. 这是全套的. 其中一个特点是，你可以设置相机的高度，你可以看到它被设置为5英尺7英寸, 也就是我的身高. 当你点击这个, 它会让你调整高度, 我肯定在给你展示这个界面.
现在让我把它放起来，这是我在布景上，让我点击这个，现在我可以把我自己放高，或者我可以把相机放低，以匹配相机对着我的实际位置. 如果摄像机在五英尺的地方，你想要五英尺的环境. 你不想从一个低角度倾斜，但然后让相机好像它是更高的. 您不希望在虚拟环境和真实环境之间存在差异.
在虚拟环境中移动
另一个很酷的功能是它可以在环境中移动. 所以如果你只是想用这个应用程序在虚拟环境中创建静态图像, 但是在周围的环境中移动，这样你就可以在需要的地方使用这些静止物. 我来告诉你怎么做.
这里有一个小游戏控制器图标. 我点击它，会得到两个图标. 左边的那个可以让我上下左右移动环境. 这个可以让我前后移动. 让我向你们展示一下这是怎样的. 这是环境. 我用的是后置摄像头，这样就不会有人在车前打开钥匙了, 这是一个有趣的角度.
但如果我想有两个人，有不同的角度? 我可以向左移动，向右旋转，然后放大或走进去, 再次向左移动. 现在我有一个反向角度的拍摄，这是从我的手机输出的1080p. 我可以毫不夸张地抓住那个框架，用它作为与虚拟布景进行站立谈话的背景.
如果我想换个角度呢? 我可以移到这里，我可以走到这里，没有头条新闻. 往后退一点. 潘离开了. 好了. 所以有人可能就站在那个地方. 当然，这是跟踪. 如果我想四处看看，我可以移动手机改变视图. 这是一个完整的虚拟环境——天花板、地板和所有东西.
该应用程序还说它会加载 不真实的环境 进入应用程序. 这意味着你可以创建自己的虚拟环境，并在手机中使用它. 和大多数iTunes订阅一样，我只要在多台设备上下载就可以购买. 这确实是一个很酷的功能如果你打算在一个实际环境中使用多个摄像头.
产生的背景
该系统还内置了生成式AI背景，这意味着你可以生成背景. 我所支付的服务水平允许我生成200个背景. 我们选一个，"哥特式大教堂内部有高耸的拱门.“你可以选择一幅数码画, 动漫, 幻想的土地, 科幻小说, 塞伯朋克, 现代计算机辐射, 梦幻油画, 天空内部景观, 钢笔墨水, 技术制图, 卡通泥塑动画, 超级艺术, 全息测试. 我选现实的.
或者我们可以选择“室内现代办公室”作为办公室会议室, 它为我生成了这个. 我可以环顾房间，这一点也不坏. 窗户没有完全对齐, 但我认为如果你专注于场景中的内容, 那也没什么大不了的.
我们再试一个. 我有一个户外的现代露台区，这是我的露台家具. 庭院家具看起来不错，它通向另一个背景中的海湾区域. 所以只要你不太注意看起来像是两种不同的绿色灌木丛和一个掉进灌木丛的跳水板, 或者沙发可以放到灌木丛里, 还有不动的树... 我猜你必须通过多个提示来确保跳水板不会掉进灌木丛中. 但这就是人工智能现在所做的:它给你这些奇怪的决定.
但是，让你的视频看起来越来越好的工具正变得越来越容易使用和更实惠. 你不需要从任何复杂的东西开始——只要一盏灯, 一个参与, 还有一部手机，这样你就能拍出好看的视频了, 在环境中移动, 用手机就能做更多的事情.
相关文章
这一期的The Streaming Toolbox是关于远程控制的, 移动设备, 广告, 以及网络运营
12月17日
多亏了廉价的实时动作捕捉软件, 虚拟角色在YouTube上获得了大量粉丝. 不久之后，他们就会在企业中找到一席之地.
2018年5月11日