谷歌利用夜视技术增强视频其方法和面临的挑战

VideoBoostwithNightSight于2023年10月与GooglePixel8系列一起发布。几周后开始推出，并且仅针对“Pro”型号。这项技术利用AI显着改善您使用Pixel设备拍摄的视频。

技术的两个要素协同工作，各自处理不同的事情。“视频增强”侧重于增强动态范围、对比度、颜色、稳定性和细节水平等参数。另一方面，“夜视”是谷歌相机应用程序长期以来为照片提供的功能在视频中的实现。

在最新的MadebyGoogle播客节目中，该公司提供了有关VideoBoostwithNightSight开发的更多细节。该团队揭示了他们到底想通过这项技术寻找什么。他们还提到了一路走来遇到的主要挑战。

谷歌在开发夜视视频增强时的重点

谷歌的主要目标是“解锁您在智能手机上看到的最佳视频质量”。Pixel设备以其高质量的照片而闻名，但视频录制却从未达到同样的水平。因此，现在他们将寻求平衡手机上照片和视频的质量平衡。

关于Pixel8Pro上该功能的排他性，他们表示，他们“刚刚开始在Pixel8Pro上为我们的用户做到这一点。”尽管这并不是任何事情的官方确认，但这为视频增强夜视功能在未来覆盖更多Pixel设备打开了大门。

谈到面临的挑战，他们提到了智能手机的处理能力。照片夜视和视频夜视之间的主要区别在于其处理方式。对于照片来说，处理是在设备上进行的，而对于视频来说，它们依赖于基于云的人工智能的力量。这是因为智能手机仍然缺乏足够的能力来进行复杂的本地视频处理。

这并不奇怪，因为即使对于台式电脑来说，这项任务也可能很复杂。让我们记住，视频文件比照片要长得多，也更复杂。关于使用云进行视频处理，谷歌团队表示如下：

“这样我们就可以决定要对齐和合并多少帧，以及如何合并它们。我们甚至可以将其提升到另一个层次。我们甚至可以做得更好。我们甚至可以同时运行更复杂的算法。例如，我们可以运行去模糊。我们可以运行稳定。我们可以进行色彩校正。”

虽然转向云进行处理的优点是能够利用Google服务器的全部功能，但这也意味着您无法在没有互联网连接的情况下使用该功能。

最重要的是，另一个巨大的挑战是处理过程的校准，以避免最终结果出现任何类型的问题。也就是说，他们必须弄清楚如何避免音频和视频之间的时间滞后、色差、随机闪烁或类似的效果。毕竟，没有人愿意使用一种不断产生不可用结果的工具。