回忆一下,大家有没有遇到这样的困惑......
想记录美好的瞬间,但奈何拍的视频太模糊....😤
好友发来的视频经过压缩变得模糊不清....😭
想看的电影分辨率低,观看起来以为自己没睡醒...😓
为此,接下来给大家介绍一个新技术!!🆕
命名为 EvTexture 的事件驱动的视频超分辨率纹理增强方法。
扫码加入AI交流群
获得更多技术支持和交流
技术简介
视频超分辨率技术(Video Super-Resolution, VSR)是提高视频质量的关键技术之一。
由中国科学技术大学和合肥综合性国家科学中心共同研发的新型视频超分辨率技术 EvTexture 。
Demo
下面欣赏一下 EvTexture 的应用效果 。🔥
技术要点
事件驱动的纹理恢复 :首次将事件信号用于视频超分辨率中的纹理恢复,填补了这一研究空白。
当前的 VSR 方法,无论带有(EGVSR和EBVSR)还是不带有(BasicVSR++)事件信号。
仍然会受到纹理模糊或抖动的影响,导致纹理区域出现较大误差。
相比之下, EvTexture 可以成功预测纹理区域,并大大减少恢复帧中的误差。
双分支网络结构 :EvTexture 设计了一个包含 动作学习分支和纹理增强分支 的双分支网络,精确恢复高频纹理细节。
迭代纹理增强 :通过 ITE 模块,利用事件信号中的高频信息,逐步优化和提升纹理的质量和细节。
技术讨论
EvTexture 在视频监控、虚拟现实、电影后期制作等领域前景广泛。对于需要处理大量动态视频数据的应用场景尤为重要。
不过在快速移动和低光照条件下的视频超分辨率,以及应对实际应用中常见的帧与事件之间的不对称空间分辨率问题还有待解决。
期待 EvTexture 为我们带来更清晰生动的视频体验!
🔗 项目链接:
https://dachunkai.github.io/evtexture.github.io
关注「 开源AI项目落地 」公众号
与AI时代更靠近一点
关注「 AGI光年 」公众号
获取每日最新咨询
关注「 向量光年 」公众号
加速全行业向AI的转变