none.gif

8eafa882

GF  2018-07-15 09:25
(Bravo!)

【初期报告】修图去字自动化

前排感谢 @mikeisgreat 提供训练用图
联动
[修图去字相关] 请问对自动化去字有没兴趣?
[造轮子用] 求已去字的小薄本和原本


先上效果
下面图为测试组, 都没有被模型处理过。








目前状况:
在Ex 去字本子能下的都下了(除了部分漫画,幼女向,), 筛选出2K张图训练模型。 可以自动生成 去字图 和 黑白图层(字体位置标为白色,其余为黑色), 比如这样:



应该可以配合photoshop的蒙版去掉不必要的部分,其实我不懂photoshop。 不过目前泛用性较差。

迟点再做个可以自动修复去字后的图片,修补色彩或者被去掉的部分。

如果可以,希望能提供更多图源。 欢迎各种建议。

lHTkTiw.jpg

Heaven

B1F  2018-07-15 09:27
(头像:https://www.pixiv.net/artworks/87347877)
看起来好强的样子

11d7dd562598483.jpg

Kim

B2F  2018-07-15 09:29
([sell=0]  [/sell])
加油

4.gif

3rd

B3F  2018-07-15 09:42
(回顾回帖历史,我这画风不对啊?)
主要是去字,效果不错啊

6.gif

zhangmaomao

不明觉厉

c99578353ec646d4.GIF

小lu

   竟然有這個,不過我還是喜歡手動   

none.gif

喵了个咪

dalao牛逼,汉化第一生产力,马上就能实现汉化流水线生产了

none.gif

8eafa882

B7F  2018-07-15 10:54
(Bravo!)

回 3楼(3rd) 的帖子

有个问题:

那张黑白蒙版能否在去字时提供帮助?我不会photoshop,所以不了解,但貌似可以作为蒙版在原图上做修改。 如果有帮助,要什么想要的效果?虽然不一定能做出来。

黑白蒙版的图其实是副产品,用在下一步的图片修复用的。

215433.jpg

路过君5号

  

我透,这个好棒!STAR了!

435678.jpg

Yuki

腻害~

44714610-3.jpg

毛玉

B10F  2018-07-15 11:21
(合集PW:毛玉mouyu丨购买设置教程见签名)
马一个

1.gif

hellhh

这用的是什么神经网络结构,请问

82813.jpg

sunsun

用户被禁言,该主题自动屏蔽!

none.gif

8eafa882

B13F  2018-07-17 09:41
(Bravo!)

回 11楼(hellhh) 的帖子

目前的模型结构:纯CNN
Mobile Net V2 作为 feature extractor, 优点是内存消耗少(512x512 图占300m左右),速度快(cpu运行7秒)
Receptive Field Block (RFB)+ Deeplab V3+ 的结构预测字体位置。
详细请参考github

none.gif

8eafa882

B14F  2018-07-17 09:48
(Bravo!)

回 12楼(sunsun) 的帖子

感谢建议。
请问汉化时翻译是跟去字分开的吗? 比如先做好翻译,排好版,然后换图层去字?
如果能短时间去除文字+修复,2张图片对比翻译会造成不便?

嵌字自动化大概需要完全不同的方法实验,或许很有用。不过这项目做完后,我打算寻找是否有可能提取字体位置后做个自动识别 (翻译估计是有生之年计划), 已经有人实现了现实照片的文字提取 (https://github.com/MhLiao/TextBoxes_plusplus) 。