REAL Video Enhancer是一款功能类似Topaz Video AI的视频补帧工具,不过REAL Video Enhancer为开源免费产品,而且支持Linux与Windows系统。
软件图片
软件特色
这个软体整合了许多开源的AI影片放大与补帧技术,将其做成图形界面方便操作。包含的技术如下:
放大模型:SPANkendata、ClearReality、Nomos8k-SPAN、OpenProteus、AnimeJaNai (RealESRGAN)
补帧模型:RIFE、GMFSS、GIMM
这里列出的模型能够用来处理真人与动画类的影片。作者未来可能会加入影片修复模型支援,让放大后影片的画面杂讯少一些。
动漫放大效果如下:
真人放大效果如下:
硬件要求
REAL Video Enhancer是用Python写成,支持Linux与Windows系统。
针对不同品牌的GPU,REAL Video Enhancer提供多种处理后端:
NCNN,透过Vulkan计算,适用于Intel、AMD、Nvidia的GPU。
Pytorch,只能透过Nvidia CUDA或AMD ROCm加速。
TensorRT,仅Nvidia GPU可以使用,且需要RTX 40或更新的GPU才可使用。
DirectML,尚未实作。
NCNN Vulkan是最为通用的方案,大多数GPU都支持。若有独立显卡就用独显处理,用CPU内显处理太慢了。
软件使用
Backend,先试试NCNN Vulkan,这个适用Intel、AMD、Nvidia GPU
开启之后,首页会右侧显示系统资讯。要看的是NCNN GPU的部份,把ID记下来。像我的电脑有Intel内显和Nvidia独显,分别为0与1。
点选左下角设置,切换到Render Setting,选取NCNN的GPU。这里我要用Nvidia GPU计算所以填入1。
Input File: 选取要处理的影片。
要转档的影片画质至少要有480p,不能太模糊,位元率不要太低,否则放大后依然是糊成一片。此外REAL Video Enhancer输出的时候是沿用原始影片的编码器,需要注意AV1和H.265编码的速度可能比H.264要慢。
Output Folder: 选取影片输出的目录。
Backend: 这里我选择NCNN,最通用的处理后端。
Upscale Model: (单纯补帧影片的话不用选)每个模型有固定的放大系数,有的模型最多放大到4倍,有的只有2倍数,无法变更。模型需要依照影片类型调整,针对放大动画的模型,建议先从RealESRGAN AnimeVideo
或AnimeJaNai
模型开始测试。真人影片则是使用Nomos8k-SPAN
或OpenProteus
模型。
Interpolate Model:(单纯放大影片的话不用选)补帧模型,一样需要按照用途调整,选取适合动画的RIFE Animation。
Interpolate Multiplier: 目标帧率,预设是2倍,像30FPS影片会变成60FPS,以此类推。
一切就绪后,点选Add to Render Queue,再点选播放键开始转档。转档时长视原始影片解析度大小而定。
版本日志
Added
Decompress
Linux ARM support
Fixed
Border Crop
Fixed Upscaling TRT again on windows.
软件下载
开源地址:https://github.com/TNTwise/REAL-Video-Enhancer/
夸克网盘:https://pan.quark.cn/s/cd1bb36f5f08
迅雷网盘:https://pan.xunlei.com/s/VOWuUSk6NOBki3HfeS7vBTBDA1?pwd=uave#
本地下载
电报频道:https://t.me/gongjuji_org
广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,工具集所有文章均包含本声明。