Adobe 研究实验室的最新人工智能项目旨在一劳永逸地消除世界上模糊和像素化的视频。以下是我们对他的了解。
Adobe 刚刚揭开了 VideoGigaGAN 的面纱,这是一种新的人工智能模型,依靠先进的生成对抗网络来通过将原始质量乘以 8 来改善低分辨率序列。
在本周发布的一篇研究论文中,Adobe 科学家表示 VideoGigaGAN 产生了卓越的结果现有的视频超分辨率(VSR)技术。通过利用生成式人工智能的力量,它可以从像素化源材料中生成令人印象深刻的清晰和精确的 1080p 或 4K 视频,不会引入常见的放大伪像,例如闪烁或失真。
另请阅读–OpenAI 推出 Sora,一种可以生成超逼真视频的人工智能
VideoGigaGAN 的强大秘诀是什么?其神经网络经过专门训练,可以从较低质量的输入生成时间一致的图像插值。在 Adobe 的将 VideoGigaGAN 与其他 VSR 方法进行比较的示例中,在 AI 缩放视频中清晰可见更精细的纹理和更锐利的边缘答:一些特写镜头甚至揭示了原始模糊源中不存在的人造细节,例如皱纹和毛孔。
当然,从低分辨率监控或手机镜头中完全伪造超高清视频引发了有关“深度伪造”和人工智能生成媒体更广泛扩散的棘手问题。但 Adobe 坚称VideoGigaGAN 结果看起来比之前的实验更加真实公司的 GAN,同时避免了以前的人工智能可能产生的奇怪结果。
虽然目前只是一个研究项目,但VideoGigaGAN的视频编辑功能,针对的是摄像师,最终应该部署在 Adobe Creative Cloud 旗舰应用程序中,例如 Premiere Pro。将过时的低分辨率素材立即转换为高清甚至 4K 质量的能力可能会改变视频编辑和内容创作者的游戏规则。