草庐IT

妙手回春,AI修复让老旧视频重焕新生

PicUP1 2024-02-19 原文

近年来,随着短视频的走红,视频剪辑美化类工具涌现,AI图像处理成为热门应用之一,而曾经的AI老照片修复更是在网络上掀起一片热潮。

目前,图像修复现已成为计算机图形学和计算机视觉中的一个研究热点,被应用到各个领域。例如文物修复、视频影视特技制作、虚拟现实、多余物体去除等,而在过去的一年里,AI修复的4K电影、演唱会频繁上线,让AI图像修复也逐渐走进人们的视野。

 现如今,高清视频修复已经不仅仅在传媒、流媒体、泛娱乐等领域具备创造价值,在普通大众之间,也逐渐缩短了距离。用户可以还原那些对自己有特殊意义的瞬间。如父母辈的一些结婚录像,小时候家庭聚餐的录影,咿咿呀呀学习说话的影像,十年前大学毕业的聚会视频等。这些多年前的模糊影像,都会在AI技术的加持下,重新鲜活起来。

皮卡智能AI近日也即将上线「模糊视频变高清」功能。现在可在官网体验视频抠图、视频漫画化、照片变活等其他视频处理功能。

 

我们采用先进的AI智能人工技术,AI视频增强技术是基于深度学习技术不断进步改进的核心算法,可对有损视频场景、低分辨率视频或视频文件进行实时放大、修复和恢复,通过神经网络(GAN)处理,有效修复编解码引入的图像错误,达到更好的超分效果,提高整体画质水平。

皮卡智能AI视频变高清主要技术攻克以下3点。

1、补画

利用数据挖掘(data-driven)的方法解决,对于图像已知部分找不到相似补丁的问题,利用存在的大量图片素材,发现补丁信息,并采用块操作,提高补画效率。皮卡智能自研算法对于有着很强帧间和行间相关性的视频修补具有很好效果。

2、图像超分辨率重建

使用对抗式生成网络(GAN)来对图像进行重建,在重建时对图像加入一些“构造出的细节”,以提升图像的主观感受。

3、帧率提升

为了恢复历史的“丝滑”感,人工智能可以帮助我们快速补充中间帧,将原始视频帧率提升至60帧左右,使人或物动作更加自然流畅。

这里通过单向运动和双向运动估计和插值算法得到内插帧后,会发现帧内产生块现象,只要通过合适的去块效应算法来消除或者减轻块效应,得到高质量的内插帧。

4、色彩增强技术

色彩增强作为视频后处理中画质增强技术的一部分,指的是通过调整图片和视频画面的饱和度特性,使得画面色彩更加丰富和逼真,提升人的视觉主观感受。

皮卡智能依旧是使用基于神经网络的方法去做图像增强,由网络自己完成对图像的调整,而不需要由人来设计公式。深度学习的增强方法一般会将色彩,对比度,亮度增强同时实现在一个网络中同时调整,达到画质增强的效果。

在经过市场调查和技术研究后,皮卡智能即将上线的「视频变高清」功能可实现以下目标:

降噪

在最大限度保持原有画面清晰度的同时去除画面上的噪波;

修复画面损伤

去除边缘锯齿和画面拉道等损伤;

增强画面分辨率

将标清净画面增强处理为高清画面;

宽高比变换

可将4:3画幅变换为16:9画幅。

对于高清视频修复的未来,除了算法模型的打磨外,结合5G、高清智能设备端普及,未来用户要求也会越来越高,从480p、1080p、4k到8k。AI技术只要不断发展,交叉领域的视频修复就会乘风而行,无论是影视经典还是儿时的回忆,AI都能让它们重新鲜活起来,充实我们的生活。

目前皮卡智能官网可在线修复图像,视频修复即将上线,敬请期待!

有关妙手回春,AI修复让老旧视频重焕新生的更多相关文章

  1. 动漫制作技巧如何制作动漫视频 - 2

    动漫制作技巧是很多新人想了解的问题,今天小编就来解答与大家分享一下动漫制作流程,为了帮助有兴趣的同学理解,大多数人会选择动漫培训机构,那么今天小编就带大家来看看动漫制作要掌握哪些技巧?一、动漫作品首先完成草图设计和原型制作。设计草图要有目的、有对象、有步骤、要形象、要简单、符合实际。设计图要一致性,以保证制作的顺利进行。二、原型制作是根据设计图纸和制作材料,可以是手绘也可以是3d软件创建。在此步骤中,要注意的问题是色彩和平面布局。三、动漫制作制作完成后,加工成型。完成不同的表现形式后,就要对设计稿进行加工处理,使加工的难易度降低,并得到一些基本准确的概念,以便于后续的大样、准确的尺寸制定。四、

  2. python ffmpeg 使用 pyav 转换 一组图像 到 视频 - 2

    2022/8/4更新支持加入水印水印必须包含透明图像,并且水印图像大小要等于原图像的大小pythonconvert_image_to_video.py-f30-mwatermark.pngim_dirout.mkv2022/6/21更新让命令行参数更加易用新的命令行使用方法pythonconvert_image_to_video.py-f30im_dirout.mkvFFMPEG命令行转换一组JPG图像到视频时,是将这组图像视为MJPG流。我需要转换一组PNG图像到视频,FFMPEG就不认了。pyav内置了ffmpeg库,不需要系统带有ffmpeg工具因此我使用ffmpeg的python包装p

  3. TimeSformer:抛弃CNN的Transformer视频理解框架 - 2

    Transformers开始在视频识别领域的“猪突猛进”,各种改进和魔改层出不穷。由此作者将开启VideoTransformer系列的讲解,本篇主要介绍了FBAI团队的TimeSformer,这也是第一篇使用纯Transformer结构在视频识别上的文章。如果觉得有用,就请点赞、收藏、关注!paper:https://arxiv.org/abs/2102.05095code(offical):https://github.com/facebookresearch/TimeSformeraccept:ICML2021author:FacebookAI一、前言Transformers(VIT)在图

  4. ruby - 如何修复 RVM gem "[ missing bin/ruby ]" - 2

    执行rvmlist后,我得到以下输出:rvmrubiesgems[missingbin/ruby]=*ruby-2.0.0-p645[x86_64]ruby-2.1.6[x86_64]ruby-2.2.1[x86_64]gems[missingbin/ruby]是什么意思?gems是某种系统gemset吗?它不是我创建的,我不知道我是否可以或应该删除它。 最佳答案 在我跑完之后:rvmfix-permissions然后我能够卸载具有[缺少bin/ruby]的版本。 关于ruby-如何修复

  5. ruby - 如何更改此正则表达式以从未指定 v 参数的 Youtube URL 获取 Youtube 视频 ID? - 2

    目前我正在使用这个正则表达式从YoutubeURL中提取视频ID:url.match(/v=([^&]*)/)[1]我怎样才能改变它,以便它也可以从这个没有v参数的YoutubeURL获取视频ID:http://www.youtube.com/user/SHAYTARDS#p/u/9/Xc81AajGUMU感谢阅读。编辑:我正在使用ruby​​1.8.7 最佳答案 对于Ruby1.8.7,这就可以了。url_1='http://www.youtube.com/watch?v=8WVTOUh53QY&feature=feedf'url

  6. ruby - 处理 gem 依赖项中错误修复的最佳方法是什么? - 2

    我有一个依赖于另一个gem的gem(在RubyGems上可用)。那个依赖的gem有一个我最近修复的错误。不幸的是,那个依赖的gem几乎已经死了;它已经很多年没有更新了,而且所有者不再在GitHub上活跃,根本,更不用说提交这个gem了,所以我不希望我的补丁会被接受——肯定不会很快。鉴于此,处理此依赖gem的补丁版本的最佳方法是什么?我是否将它fork并上传一个新的gem(使用新名称)到RubyGems,并依赖它?我是否以某种方式将我的固定版本与我自己的gem打包在一起? 最佳答案 首先,检查有问题的gem的许可证(以及您的代码的许可

  7. ruby-on-rails - 什么是自动修复英语语法的 Rails 插件或 Ruby gem? - 2

    Facebook刚刚重新推出了具有自动语法修复功能的评论。Whatdoesthegrammarfilterdo?Addspunctuation(e.g.periodsattheendofsentences)TrimsextrawhitespaceAutocaseswords(e.g.capitalizethefirstwordofasentence)Expandsslangwords(e.g.plzbecomesplease)Addsaspaceafterpunctuation(e.g.Hi,CatwouldbecomeHi,Cat)Fixcommongrammarmistakes(e

  8. ruby-on-rails - 在 Windows 7 x64 上安装 Ruby and Rails 和 DevKit 时出现问题 - 需要修复 - 2

    我在尝试安装ruby​​和rails时遇到了很多问题。在清除以前安装的版本之后,我已经尝试过没有和现在。尝试运行“geminstallrdiscount--platform=ruby”时出现以下错误:C:\Windows\system32>geminstallrdiscount--platform=rubyTemporarilyenhancingPATHtoincludeDevKit...Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingrdiscount:ERROR:Failedtobuildgem

  9. ruby - 如何修复此错误 : kernel_require. rb :45:in `require' : cannot load such file? - 2

    我有以下文件结构:执行.rb图书馆我的类(class).rb在execute.rb我有下面的代码:#!/usr/bin/rubyrequire'lib/my_class'my_object=MyClass.newmy_object.some_method这是my_class.rb的代码:classMyClassdefsome_methodputs'OK'endend所以,我尝试运行execute.rb:rubyexecute.rb但是我收到这个错误:/home/vagrant/.rvm/rubies/ruby-2.0.0-p195/lib/ruby/site_ruby/2.0.0/ru

  10. 未来的趋势————以ChatGPT为标杆的AI对生活的影响是巨大的 - 2

    文章目录前言1.AI的发展历程2.我是如何接触到人工智能的概念和产品的3.对于ChatGPT的一点看法4.AI对大学毕业生的职业发展的利与弊5.对于AI的思考和问题前言随着ChatGPT的爆火,生成式AI,大模型的人工智能被越来越多的人注意到,同时他也带来了许多问题。本文将对几方面进行探讨。1.AI的发展历程远古时期在公元前第一个千禧年,中国,印度和希腊哲学家都提出了一些推理的研究理论,比如亚里士多德(Aristotle)进行了演绎推理三段论的完整分析,欧几里得(Euclid)所著Elements是一种形式推理的模型,MuḥammadibnMūsāal-Khwārizmī,发明了代数学,即我们

随机推荐