讨论分享二次元图片拉伸+降噪黑科技 waifu2x

这个帖子发在这里实际上是班门弄斧，其实主要还是想厚脸皮分享和讨论学习一下~waifu2x的主要功能是两方面的，一是高质量放大，二是降噪提升锐度。

使用界面说明：https://github.com/lltcggie/waifu2x-caffe
在线版试用：http://waifu2x.udp.jp/
win版中文版本打包链接：http://pan.baidu.com/s/1pJOUEE3  密码：9cl5 （已改为楼下TautCony汉化的的版本）
可能需要安装vcredist_x64和vcredist_x86，反正我用的win10就需要，不然程序是打不开的。
原图与成品对比，方便下载对比观看：链接：http://pan.baidu.com/s/1pJ06PcB 密码：ycef

前段时间看了b站上V.R.大大用waifu2x拉伸的DVD源的可塑性记忆NCOP（http://www.bilibili.com/video/av2807586/），看起来蛮不错，又发现VCB招新也在招waifu2x测试人员，就对这个黑科技算法有了点兴趣。自己用在线版测试一下，发现效果相当好啊。然后下载了一个win版摸索着用，使用不是很方便，连文件输入输出路径都要自己装，但比网页版自由点，试用结果如下。自己摸索，几乎没有理论基础，描述不专业，也不严谨，有错误欢迎指正~所有原图文件名没有后缀，只有2x、1.6x、3.24x等后缀的是采用了弱降噪放大的图片，未降噪和强降噪的文件名中都特别标明了。全部图片都拉伸至宽度为1920像素，未说明的默认使用了弱降噪。

鼠标停留在图片上可以看到文件名，包含放大倍数和降噪强弱信息。用论坛自带的图片浏览器需要放大看。

小小总结：
1、冰菓，原图其实清晰度不好，线条边缘有好像一层油一样的东西糊在上面，直接用看图器放大会很明显。waifu2x拉伸并降噪后反而画质变好了，线条锐度增加。，糊状物也没有了。高降噪比弱降噪更讨好眼睛，但是损失了很多细节，比如后面房顶的线条。这个图，我喜欢弱降噪放大版本。原图：

弱降噪：

强降噪：


2、君嘘&夏洛特，特点同上，有过之而无不及。画质不降反升的典型。三种不降噪、弱降噪、强降噪的差异对比非常明显，尤其是手和头发。
原图：

低降噪：

高降噪：

不降噪：


3、四月わ君の嘘，线条比较少，按我的理解应该是很适合用waifu2x进行放大的。感觉放大倍数一旦大起来，线条很容易发虚，虽然在waifu2x中这个现象比起大算法好得多，但是依然避免不了这个问题。V.P.大大那个可塑性记忆里很明显就是远景线条发虚，近景就不明显。天空的区别我看不太出来，眼力不好。
原图：

弱降噪：


4、鹭泽文香，原图的色块上有很多纹路，放大之后特别明显。这个使用降噪后线条锐度更高，但是反而比没降噪还虚一些，也许是因为纹路的衬托作用？反正这个图我喜欢弱降噪后的。
原图：

不降噪：

弱降噪



5、EF，没什么好说了，效果不错。
原图：
弱降噪：


对比就到这里了，能力和精力都有限。大致规律是，原图瑕疵越多，越需要强降噪，放大倍数越大，越需要强降噪。就算不放大，仅仅为了修复原图瑕疵，进行降噪锐化，效果也很赞的。

waifu2x真是个好东西，真福利啊。从我的角度来说，这玩意儿最大的好处就是upscaling后线条锐度依然很高，而我对线条锐度的敏感度远远超过色彩准确性。高线条锐度配合降噪，画面会看起来很干净，很清晰。以后看到什么分辨率比较小的二次元好图，就可以用waifu2x拉起来使用，这对于做mad或者做壁纸什么的真是天大的福音。

缺点有2个，一是仅仅用于二次元图效果比较好，三次元效果不行。二是运算太艰难了，我的E3 1231V3 CPU算一张2x的图要花3分多钟。不过好在可以用显卡CUDA来运算，我用 GTX 960基本1~3秒就能算出来，不知A卡更多的流处理器处理起来会比N卡提升多少。

还有个问题，这工具没有批量处理功能不说，竟然输出路径和输入路径还要自己输入，够蛋疼的……我不怎么懂编程，不知有没有哪位大佬可以开发一下批量处理功能？或者是汉化一下？用起来基本上没什么障碍，不过能汉化肯定更好。

很期待这个工具应用到视频压制中，对渣画质的BD和DVD肯定是个好的处理方式，哪些渣原盘感觉会有挺多提升的……缺点感觉还是吃性能，CPU基本就别指望了，一张图就几分钟了，CUDA可以指望。嘛，毕竟这是VCB-S现在在开发的东西……貌似之前VCB压的花之异变之章就是用了waifu2x算法拉起来的？

如果过几年有幸显卡性能提升，能够用waifu2x算法在看低分辨率片子的时候配合madvr进行即时处理，那就酸爽了……低分辨率视频可以拉高，高分辨率低画质视频可以提升锐度，看什么都高清，再也不用“三米抗锯齿，五米变高清，摘下眼镜看4K”了……

以上~

批处理的话，就不要这 gui 了，直接用命令行的版本 waifu2x-caffe-cui.exe 吧

1. USAGE:
   
2. 
   
3.    waifu2x-caffe-cui.exe  [-b <int>] [-c <int>] [-p <cpu|gpu|cudnn>]
   
4.                           [--model_dir <string>] [-s <double>] [-n <1|2>]
   
5.                           [-m <noise|scale|noise_scale|auto_scale>] [-e
   
6.                           <string>] [-l <string>] [-o <string>] -i <string>
   
7.                           [--] [--version] [-h]
   
8. 
   
9. 
   
10. Where:
    
11. 
    
12.    -b <int>,  --batch_size <int>
    
13.      input batch size
    
14. 
    
15.    -c <int>,  --crop_size <int>
    
16.      input image split size
    
17. 
    
18.    -p <cpu|gpu|cudnn>,  --process <cpu|gpu|cudnn>
    
19.      process mode
    
20. 
    
21.    --model_dir <string>
    
22.      path to custom model directory (don't append last / )
    
23. 
    
24.    -s <double>,  --scale_ratio <double>
    
25.      custom scale ratio
    
26. 
    
27.    -n <1|2>,  --noise_level <1|2>
    
28.      noise reduction level
    
29. 
    
30.    -m <noise|scale|noise_scale|auto_scale>,  --mode <noise|scale
    
31.       |noise_scale|auto_scale>
    
32.      image processing mode
    
33. 
    
34.    -e <string>,  --output_extention <string>
    
35.      extention to output image file when output_path is (auto) or
    
36.      input_path is folder
    
37. 
    
38.    -l <string>,  --input_extention_list <string>
    
39.      extention to input image file when input_path is folder
    
40. 
    
41.    -o <string>,  --output_path <string>
    
42.      path to output image file (when input_path is folder, output_path must
    
43.      be folder)
    
44. 
    
45.    -i <string>,  --input_path <string>
    
46.      (required)  path to input image file
    
47. 
    
48.    --,  --ignore_rest
    
49.      Ignores the rest of the labeled arguments following this flag.
    
50. 
    
51.    --version
    
52.      Displays version information and exits.
    
53. 
    
54.    -h,  --help
    
55.      Displays usage information and exits.
    
56. 
    
57. 
    
58.    waifu2x reimplementation using Caffe

复制代码

woodcube 发表于 2015-10-31 23:06
批处理的话，就不要这 gui 了，直接用命令行的版本 waifu2x-caffe-cui.exe 吧

那个我也有，不过其实我不怎么会用命令行，毕竟非计算机专业。能给代码加上注释么，在设置关键参数如倍数、降噪与否、输入输出路径的指令后面。

woodcube 发表于 2015-10-31 23:06
批处理的话，就不要这 gui 了，直接用命令行的版本 waifu2x-caffe-cui.exe 吧

请问下，GPU和CUDNN处理什么区别？在UI界面使用CUDA时启用的哪个？

东方那个还没用到waifu2x
用到waifu2x的参见革命机的几个720p的玩意儿。

还有个问题，这工具没有批量处理功能不说，竟然输出路径和输入路径还要自己输入，够蛋疼的……

这个，其实，界面上已经写了，文件夹也可以(フォルダでもOK)啊（这个是带拖拽载入文件的，拖进去就行了）

另外，界面我汉化了一下，弹出的message box的内容和下面的textbox里的文字我无能为力预览：

下载地址：http://pan.baidu.com/s/1pJKjJb9


再另外，这个帖子的回复被你设置成仅楼主可见了，快修改下

TautCony 发表于 2015-11-1 23:22
这个，其实，界面上已经写了，文件夹也可以(フォルダでもOK)啊（这个是带拖拽载入文件的，拖进去就行了）
...

我去……我都没发现设置成了楼主可见……感谢提供~顺便，鉴于现在主流是1080P的分辨率，有没有可能添加一个功能，默认把图拉成1920宽或者1080高？

TautCony 发表于 2015-11-1 23:22
这个，其实，界面上已经写了，文件夹也可以(フォルダでもOK)啊（这个是带拖拽载入文件的，拖进去就行了）
...

貌似缺东西，在配置上面。能提供解决方法么？安装OPENCV CORE 249？

嘛，我是百度解决了……找到这些东西复制到windows\system32 目录下就行了

其实是要把这个文件放到waifu2x文件夹才能用，不是单独的=。=||

QPet 发表于 2015-11-2 16:06
貌似缺东西，在配置上面。能提供解决方法么？安装OPENCV CORE 249？

嘛，我是百度解决了……找到这些东西 ...

既然是界面汉化嘛，其他没动过的东西我就不带上了，性质接近一个补丁吧

看网盘昵称，感觉楼主是我高中校友:victory::D:victory: