无损放大图片和视频?这两款AI工具值得拥有
身为一个编辑,除了文字工作这个主要的工作内容之外,经常还需要考虑一个很重要的问题:插图。
全是文字的文章肯定没有图文形式的文章抓人眼球,更别提这个视频当道的年代了,因此每次撰写文章的时候,笔者都要在无版权图片网站精挑细选,让图片和文章主旨契合,并且最好是高分辨率的图像。
但意外也总是有的,有的时候遇到了分辨率不足但偏偏最适合的图像,就很让人苦恼了,直接将低分辨率图像插入文章中,会很明显地感觉到视觉上的不舒适,虽然现在PS甚至是Windows自带的画图工具都能修改图片分辨率,但强行拉伸的结果只会是:图片非常糊。
可以看到,在进行图片拉伸后,图片边缘已经出现了明显的毛刺感。
那有没有什么方法能够让图片无损放大呢?
别说,还真有,这个来自GitHub的项目“waifu2x”就能做到。
闲话少说,这里直接放使用waifu2x和普通拉伸图片后的对比(左侧为拉伸,右侧为使用waifu2x的效果)。
可以看到,使用waifu2x放大图片后,“5G”边缘的毛刺感不再明显,虽然部分区域还存在噪点问题,但整体上来说,比直接拉伸的效果要好太多。
那为什么waifu2x可以做到无损放大图片呢?这是因为waifu2x使用了名为SRCNN的卷积算法,传统意义上来说,图像超分辨率问题研究的是在输入一张低分辨率图像时(LR),如何得到一张高分辨率图像(HR)。
传统的图像插值算法可以在某种程度上获得这种效果,比如最近邻插值、双线性插值和双三次插值等,但是这些算法获得的高分辨率图像效果并不理想。
SRCNN是首个使用CNN结构(即基于深度学习)的端到端的超分辨率算法,它将整个算法流程用深度学习的方法实现了,并且效果比传统多模块集成的方法好。
SRCNN流程如下:首先输入预处理。对输入的低分辨率LR图像使用bicubic算法进行放大,放大为目标尺寸。
那么接下来算法的目标就是将输入的比较模糊的LR图像,经过卷积网络的处理,得到超分辨率SR的图像,使它尽可能与原图的高分辨率HR图像相似。
与Bicubic、SC、NE+LLE、KK、ANR、A+这些超分算法相比,SRCNN在大部分指标上都表现最好,且复原速度也在前列,且RGB通道联合训练效果最好,这就意味着相比照片,waifu2x在放大插画(你们最喜欢的二次元图片)时会更有优势。
那既然图片可以无损放大,视频呢?
结果当然也是可行的,不过这次用到的工具,叫做Topaz Gigapixel AI for Video,这个软件通过数千个视频进行培训,并结合来自多个输入视频帧的信息,通过真实的细节和运动一致性将视频放大至8K分辨率。
作为一个AI软件,它需要一台快速的计算机。推荐的系统配置是32 GB RAM加上具有6GB或更大显存的NVIDIA显卡。虽然也勉强能在旧电脑上跑,但速度会非常慢。
那Topaz Gigapixel AI for Video是如何做到放大视频的呢?其实在安装的时候,会发现这个软件会安装TensorFlow库和cuDNN库,所以很明显,该软件就是运用基于深度学习的卷积神经网络对每一帧进行处理,全程跑CUDA单元(要不然也不会这么慢了)。
熟悉显卡的老哥们都知道,显卡作为电脑主机里的一个重要组成部分,是电脑进行数模信号转换的设备,承担输出显示图形的任务。
显卡接在电脑主板上,它将电脑的数字信号转换成模拟信号让显示器显示出来,同时显卡还是有图像处理能力,可协助CPU工作,提高整体的运行速度。对于从事专业图形设计的人来说显卡非常重要。
民用和军用显卡图形芯片供应商主要包括AMD和NVIDIA两家(今年Intel也会加入乱战)。
GPU的构成相对简单,有数量众多的计算单元和超长的流水线,特别适合处理大量的类型统一的数据,例如矩阵乘法和加法,因此显卡在AI领域的应用也就变得十分广泛,CUDA是NVIDIA推出的只能用于自家GPU的并行计算框架。
只有安装这个框架才能够进行复杂的并行计算,主流的深度学习框架也都是基于CUDA进行GPU并行加速的,Tensorflow也不例外。
不过比较遗憾的是,Topaz Gigapixel AI for Video的售价还是比较贵的,接近200美元的价格可以劝退很多人了,但用来还原或者修复某些古老的影视作品还是相当有用的,现在能在B站搜索到的相当一部分【4K修复】视频,都是基于这个软件制作的。
现在想想,AI的出现确实解决了生活中的很多实际问题,如果没有卷积神经网络的高速发展,看到高清重制版的古老影视作品,可能只会存在于想象中。
相关推荐:
最新新闻:
- Redmi K50电竞版官方图曝光:背部有奔驰AMG联名LOGO
- 三星Tab S8平板国内价格公布:最贵12499
- 第一款不配充电器的骁龙8旗舰!三星Galaxy S22售价5100元起
- 合理选择路由器,组建手机工作室网络
- Redmi K50电竞版首张真机图亮相 颜色取名为冰斩
- 约3152元人民币 传音尼日利亚发布Infinix Zero 5G
- Redmi K50电竞版预热,现已上架颜值拉满
- 卢伟冰:Redmi K50用力过猛 全面驯龙
- 三星Galaxy S22黑科技:一个功能让内存增加8GB
- 非常方便!刘作虎分享OPPO Find N分屏新增一实用场景
- 中国手游全球收入最新排行出炉!《王者荣耀》重回iOS榜首
- 首个国产大飞机C919订单已达850架 售价预计只要0.8亿美元
- 三星发布安卓平板之王Tab S8 Ultra:14.6寸巨无霸
- 三星发布Galaxy S22 Ultra手机:首次自带S Pen
- 微软对Windows最新承诺:绝不垄断封闭应用商店
- 超窄边框43英寸大屏!一加Y1S系列智能电视渲染图曝光
- 三星Galaxy S22国行价格来了:顶配高达12599元!
- 育碧任天堂招牌IP联手打造策略战棋游戏《马力欧疯狂兔子:王国之战》
- 《荒野大镖客:救赎2》销量已超过4300万份 成功进入史上最畅销TOP10
- 《王者荣耀》情人节传说皮肤公布 上线时间2月12日0:00
- 《师父》多平台画面测试对比 RTX 3050和PS5游戏画质非常相似
- 中国手游全球收入最新排行出炉!《王者荣耀》重回中国iOS手游畅销榜榜首
- 索尼公布《地平线:西之绝境》PS4版实机演示视频
- Adobe PR大更新 启用10bit 420 HDR HEVC硬解
- 微软听取用户意见 针对Windows 11的体验进行改善
- 微软对Windows最新承诺:绝不垄断封闭应用商店
- 三星发布会曝光Windows11新功能 快速打开安卓设备上3个最近App
- ROG 2022款幻16开卖:12代酷睿i7+RTX 3060
- 中兴第三代5G室内CPE开售 支持5G+宽带双网聚合
- 联想拯救者2022游戏本充电规格公布 私有协议充电最大支持135W
- AMD 35W/Zen2速龙4150GE跑分曝光
- 5款X370主板发布BIOS更新 支持点亮锐龙5000及锐龙7 5800X3D处理器
- 索尼发布旗舰级音乐播放器新品 搭载Walkman系统内置DSD母带重制引擎
- 一加Y1S系列智能电视渲染图曝光 采用超窄边框设计
- 极米100英寸4K全色激光电视官宣 号称能挑战OLED电视的色彩表现
- 三星发布安卓平板之王Tab S8 Ultra 采用14.6英寸超大屏幕
- 强势挑战iPad!安卓平板之王三星Tab S8价格公布
- Garmin Instinct 2太阳能智能手表可能永远不需要充电
- 超6万人请愿退款《2042》 EA或被告?
- 18个端口!CalDigit推新款雷电4扩展坞
- 国行Switch又一大作上线:售价299元
- 攒机单点评:性价比不等于选杂牌!
- 苹果将为零售员工提供带薪育儿假和更多病假
- Safari浏览器遭吐槽:就是新的IE
- 【手慢无】618同价!游戏键盘+鼠标仅需59元 这是真白菜价!
- EA要当被告?超5万人请愿战地2042退款
- 90后小伙用炒菜机器人开了一家24小时餐饮店 周入10万元
- 【手慢无】替换1650 RTX3050原价开抢
- 赶超AMD:酷睿i7-12700K进入CPU畅销榜TOP5
- 好评率99% 方正大容量固态硬盘开学季仅需159元
- 中国移动确定A股发行价为57.58元 对应发行市盈率为12.02倍
- 前11个月河北省电子信息产业主营收入2056亿元 同比增长23.7%
- “十三五”期间 河北省文旅项目总投资突破5000亿元
- 三季报不及预期 “免税茅”罕见闪崩跌停
- A股市场未来将会有哪些走势? 市场或继续震荡修复的结构性行情
- 前三季度海南货物贸易进出口总值1013.5亿元 内首次突破1000亿元
- 九月份安徽省居民消费价格涨幅扩大 食品价格同比环比均下降
- 8月末河北省个体工商户经营性贷款余额同比增长19.4%
- 前三季度居民人均可支配收入26265元 同比增长9.7%
- 前八月我国软件业完成软件业务收入59710亿元 同比增长20.8%
- 宏光MINIEV敞篷版实车上路:5万元买爆
- 开源固件基金会发布状态更新 必要基础设施已基本就绪
- 一加不大可能在2022下半年之前发布UnifiedOS
- 老外点赞三星S22:给苹果和谷歌上了一课
- 梦回2019:三星两款无线充电器曝光 仅支持15W
- 三星将在元宇宙里发布Galaxy S22旗舰
- 消息称苹果大规模生产iPhone SE3 新机最快会在3月底上市
- 1月Android手机性价比榜单公布 realme和小米榜首位置争得难解难分
- iPhone推出点击支付功能上热搜 仅支持在美国地区使用
- 三星S22 Ultra成为手机屏幕亮度最高的旗舰 可以达到1750尼特
- 红魔7系列搭载135W快充 首发165W氮化镓
- 卢伟冰预热Redmi K50电竞版 将于2月16日发布
- 曝努比亚Z40 Pro将首发IMX787镜头:拥有1/1.3±英寸大底
- 三星将在元宇宙里发布Galaxy S22旗舰
- Intel显卡实物曝光:想对标RTX 3070
- 导出时长减少92%!Adobe Pr给力更新 N卡、I卡均可用
- 开源固件基金会发布状态更新 必要基础设施已基本就绪
- 一加不大可能在2022下半年之前发布UnifiedOS
- 老外点赞三星S22:给苹果和谷歌上了一课
- 梦回2019:三星两款无线充电器曝光 仅支持15W
- 三星将在元宇宙里发布Galaxy S22旗舰
- 这台游戏机“有毒” Xbox官方账号互动最为“致命”
- 代码显示,苹果AR/VR系统或被命名为RealityOS
- 增加120km续航 特斯拉Model 3/Y专用光伏电池板即将推出
- Redmi新机发布:1亿像素主摄 比K50便宜