看板 C_Chat
作者 cybermeow (北歐組一生推)
標題 [閒聊] 訓練了一個生成凱留頭的模型
時間 Mon May 25 20:33:47 2020


廢話不說先直接上結果

使用範例:

https://i.imgur.com/I4xNU6A.jpg
[圖]
 

https://i.imgur.com/eiag3pK.jpg
[圖]
 

https://i.imgur.com/oOHB7aF.jpg
[圖]
 

https://i.imgur.com/BBR81CN.jpg
[圖]
 

隨機生成的圖 (沒有挑選過而且模型還沒訓練到收斂所以並沒到非常好

https://i.imgur.com/dM3QZFC.jpg
[圖]
 


研究動機:

近年凱留接頭日益盛行,然而接頭本身耗費人力,不僅僅要求操作者的PS技巧
而且接頭素材有限,對於一張給定的圖,不一定擁有適當的頭來接
如果想要上網尋找最合適的頭又需要額外的付出
同時以凱留的角度而言,雖然有很多身體,可是頭卻是固定幾個,相當的不平衡
我們希望此研究能夠拋磚引玉,引起更多人對於凱留接頭全自動化這個問題的重視


方法:

先跳過,有人有問再說
基本上都是拿現成的程式碼直接使用
這只是一個極短時間娛樂性質的 Project
接下來有空會考慮做一些比較實用而且效果也比較好的(一樣是動畫相關的)東西
真的有成品的話應該也會 release source code 和訓練好的模型甚至架設網站等等
歡迎有興趣的人來討論

另外推薦幾個個人覺得「實用」的深度學習應用到動畫上的模型
Tagger:
https://www.reddit.com/r/MachineLearning/comments/edzqp8/p_deep_danbooru_girl_

 
image_tag_estimation_source/
Decensor:
https://github.com/natethegreate/hent-AI
GitHub - natethegreate/hent-AI: Automation of censor bar detection
[圖]
Automation of censor bar detection. Contribute to natethegreate/hent-AI development by creating an account on GitHub. ...

 
一般而言 reddit/animeresearch 上面有很多東西  大家可以試著去挖寶



置底

https://imgur.com/pbBiSGu.jpg
[圖]
 

--
北歐組一生推
https://imgur.com/ydMoryp.jpg
https://imgur.com/njHa0OA.jpg
https://imgur.com/KVrWmNb.jpg
https://imgur.com/leUc4jP.jpg
https://imgur.com/2UN6JMx.jpg

--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.225.166.20 (臺灣)
※ 文章代碼(AID): #1UoxitUN (C_Chat)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1590410039.A.797.html
Golbeza: 這到底在幹嘛1F 05/25 20:34
s87879961: 兄弟  不要這樣浪費才能阿www2F 05/25 20:34
waitan: 接頭霸王產生器2.03F 05/25 20:34
zxcv070801: 有東西4F 05/25 20:35
dodomilk: 有趣XDDDDDD5F 05/25 20:35
[圖]
 
doggy10454: 太…太強啦7F 05/25 20:36
DDM76: 我覺得我應該推一下8F 05/25 20:36
melzard: 你會不會是人類史上第一個用凱留發論文的人類R9F 05/25 20:36
white841230: 推10F 05/25 20:37
rickydai888: 這篇有發展潛力 前排插眼推個11F 05/25 20:37
ernova831: 你到底在幹嘛...12F 05/25 20:37
guogu: 殺小w13F 05/25 20:38
fragmentwing: 太強了吧 你是要發論文嗎14F 05/25 20:38
littlebug421: 浪費才能(稱讚意味)15F 05/25 20:39
highwayshih: 浪費才能欸XDDDDDDDDDDDDDDDDDDDD16F 05/25 20:39
ryohgi: 浪費才能系列XDD17F 05/25 20:40
Ttei: 再不推就準備被凱留換頭啦18F 05/25 20:40
nahsnib: 這就是傳說中的scp-k,自動將識別到的人型生物頭部替換19F 05/25 20:41
sunshinecan: 不要浪費才能好嗎 XDDD20F 05/25 20:41
fakinsky: ?????21F 05/25 20:41
a1216543: 督丟校欸XDDD22F 05/25 20:41
a2470abc: 有沒有模型架構能看啊 好像有點屌23F 05/25 20:41
這個就stylegan2直接train而已
換頭的部分encode回latent space找生成裡面接近的
最後接頭還是自己P
因為幾乎都用現成的code所以髮色跟貓耳換的時候效果常常不好
接下來應該會考慮改成image to image translation的系列來做
先translate一次頭再自動處理artifact搞不好就能整張自動換了?
Erichikaunkr: ????24F 05/25 20:42
tw15: 靠凹XD25F 05/25 20:43
evan09900966: 讚26F 05/25 20:43
LovelyCS: ???27F 05/25 20:43
a1l12: ???!!!!!XDDDDD28F 05/25 20:44
naya7415963: 我看了什麼...29F 05/25 20:45
Anemoneheart: ...30F 05/25 20:46
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 20:50:42
lcw33242976: 好猛XDDD31F 05/25 20:47
LANJAY: 你是要寫論文嗎?不要浪費才能啦XD32F 05/25 20:48
lin79529: 浪費才能w33F 05/25 20:48
killuaz: 你接頭系XD34F 05/25 20:48
Reshiram: 這是用卷積做的嗎 好酷www35F 05/25 20:49
fragmentwing: 所以是先找脖子→脖子角度→自動配對縮放大小接頭嗎36F 05/25 20:49
kinomon: 好37F 05/25 20:49
efkfkp: 這三小,博士快回去寫論文好嗎XD38F 05/25 20:49
真的NeurIPS deadline快到了
nebbiabards: 無限頭製欸39F 05/25 20:49
vincentwg: <接頭霸王之實際應用>40F 05/25 20:51
ases60909: 發paper啦41F 05/25 20:51
Authsty: ??42F 05/25 20:51
Erichikaunkr: 咦 原來還是要自己P喔XD43F 05/25 20:51
可以圖片直接換但因為目前沒有segmentation mask效果不好(就正方形換掉)
希望有人可以訓練一個不然自己要試著weak supervise一個
a123444556: 浪費才能文+144F 05/25 20:52
redhen0857: 不要浪費才能45F 05/25 20:52
q0928755515: 兄弟....46F 05/25 20:52
leftside: 要開發出新的固有結界了47F 05/25 20:52
Zerogos: 這個太強了,不推不行48F 05/25 20:53
superpaden: 浪費才能欸49F 05/25 20:53
hugowind: 斯巴拉系!!50F 05/25 20:53
peter0318: 推 笑死XD51F 05/25 20:53
[圖]
 
doraemon8709: 浪費才能XD53F 05/25 20:55
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 20:55:11
gggaaammm: 7777777754F 05/25 20:55
knight791211: 果然西洽充滿各種天才55F 05/25 20:55
uuhao: 你是把接好頭的照片跟原本的照片一組來當訓練資料?
讓他學習接頭的方式?56F 05/25 20:56
因為頭是生成的所以可以想像成生成的頭自己的角度之類的就自己對了
allanbrook: XDD 不要搶我們改圖的人飯碗好嗎58F 05/25 20:58
ikaros35: 類似cycle GAN的模型嗎XD59F 05/25 20:59
這是我下一步打算做的抱歉讓你失望了
aOwOa: 之前學稀疏矩陣的時候就覺得影像處理這塊的發展比我想像中強大很多60F 05/25 21:01
find64324: 三小R62F 05/25 21:02
ShibaTatsuya: 笑死 浪費才能63F 05/25 21:03
ZongKenGG: 你在幹嘛????64F 05/25 21:03
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 21:05:15
Sacral: 浪費才能啦XDDDD65F 05/25 21:04
twosheep0603: 有沒有想過利用類似凱留MMD模型大量生成不同角度的sample呢 感覺可以更快收斂66F 05/25 21:04
怕會有嚴重的distribution shift而且個人沒使用mmd的經驗
不過應該可以特別設計模型來處理
※ 編輯: cybermeow (36.225.166.20 臺灣), 05/25/2020 21:11:13
e2167471: what are you doing68F 05/25 21:09
asderavo: 有內味了69F 05/25 21:09
aegisWIsL: 有夠浪費才能xD70F 05/25 21:13
cross980115: 全自動接頭霸王產生器 指日可待?71F 05/25 21:15
fate111085: 卡等GAN版本 有搞頭72F 05/25 21:15
Youmukon: 標靶換頭73F 05/25 21:19
overcame: 三小啦XDDDD74F 05/25 21:23
Tiamat6716: 迷失接頭75F 05/25 21:23
jackwula9211: 你論文是不是卡住了才跑來做這個?76F 05/25 21:25
koty6069: 浪費才能77F 05/25 21:26
SoQXuanChi: 文明的進步78F 05/25 21:27
ahw12000: 讚啦 完美凱留世界79F 05/25 21:31
ss77995ss: 推80F 05/25 21:37
danielqwop: 希望這能讓你的論文找到靈感XD81F 05/25 21:40
Derriclc: 幹 笑死 我沒看也沒玩公連 都快變凱流粉了82F 05/25 21:40
iamnotgm: 有創意XD83F 05/25 21:43
jjimonkey: 浪費才能XDD84F 05/25 21:47
mokissru: 浪費才能XDDDD85F 05/25 21:47
dangerousair: 不順便把簽名檔都換一次頭嗎xdd86F 05/25 21:48
gbls9527341: 完美凱留世界87F 05/25 21:48
a195732684: 浪費才能啊你88F 05/25 21:50
leion237: 真接頭霸王89F 05/25 21:52
WindSucker: 天網90F 05/25 21:54
QT1020: 這三小XDDD91F 05/25 21:54
qn123456: 接頭霸王2.0 XD92F 05/25 21:56
ehentai: 百推之前推一個93F 05/25 21:57
bomb1000: 太神啦 最近也在做機器學習專題 是個菜鳥 踩了好多坑XD94F 05/25 21:58
uohZemllac: 野生的才能跳出來了!!95F 05/25 21:58
assassin762: 三小96F 05/25 21:58
Ikaros2601: 全自動凱留大接頭時代來臨喇97F 05/25 21:59
Geiwoyujie: 這有點神 XDDD98F 05/25 21:59
enders346: wwwww99F 05/25 22:01
took: 深度學習作業212F 05/26 14:18
※ 編輯: cybermeow (36.225.161.55 臺灣), 05/26/2020 14:54:09
FuckQguy: 全自動接頭www213F 05/26 15:00
A1pha: 讓我猜猜,論文寫到起笑了對吧?XD214F 05/26 15:47
crazy6341556: 害怕215F 05/26 16:07
SilverFlare: 接頭博士www216F 05/26 16:17

--
--
(cybermeow.): [閒聊] 訓練了一個生成凱留頭的模型 - ACG板