利用stable diffusion製作ai動畫

首頁 > 科技

利用stable diffusion製作ai動畫

來源:糗事百科 釋出時間:2023-08-16 09:31

第一步,擷取影片中最有代表性的一幀拖入Tagger介面。用反推命令推出圖片的大致提示詞,然後解除安裝模型(避免佔用過多視訊記憶體),最後複製提示詞貼上到圖生圖介面。

第二步,來到圖生圖介面。選擇一個你喜歡的大模型,這裡我仍是以majicrealistic V6模型進行示範。因為這個提示詞將在mov2mov介面對每一幀生效,所以正面提示詞只需要書寫一些質量詞和人物的基本特徵即可,也可以加入你喜歡的lora。接下來選擇適合這個模型的取樣器和取樣步數(作者一般都會先容),尺寸與原圖保持一致,重繪幅度建議設定在0.5以下,以保持影片的相似度。

這裡附上我的提示詞利便大家復刻!

正面提示詞:1girl, solo, dress, long hair, brown hair, solo, dress, long hair, brown hair, realistic, blue dress, looking at viewer, striped, brown eyesair, realistic, blue dress, looking at viewer, striped, brown eyes, (人物特徵)

Best quality, masterpiece, ultra high res, (photorealistic:1.4) (質量詞)

負面提示詞:ng_deepnegative_v1_75t ,badhandv4

第三步,開啟controlnet外掛。

預處理器選擇openpose_full,模型預設來控制人物的姿勢。勾選啟用和完美畫素(Pixel Perfect),8G及以下的視訊記憶體建議勾選低視訊記憶體模式,其他引數保持預設,最後點選天生即可。根據天生結果反覆除錯直到天生滿足的結果。

第四步,來到mov2mov介面,拖入需要處理的影片。

複製第三步圖生圖的引數,Noise multiplier(噪聲乘數)可以設定在0.5左右。

Movie Frames代表幀率,這裡需要與原影片保持一致

Max Frames代表最大幀率,預設-1不生效。假如影片幀率為30,你可以設定Max Frames為60,即先生成一個2秒的影片先測試一下大致效果

現存問題分析

1.ai天生的影片難以避免的存在閃爍的問題,並且對於人物的姿勢和衣飾難以完全控制

2.速度慢,繪製一個10秒30幀的影片花了將近半個小時(3090 24G視訊記憶體),當你開啟controlnet和添加了多個lora之後,天生時間還會成倍增加。

注:本文源自乾坤AI,作者:ai-worldai,更多內容請關注乾坤AI。

第一步,擷取影片中最有代表性的一幀拖入Tagger介面。用反推命令推出圖片的大致提示詞,然後解除安裝模型(避免佔用過多視訊記憶體),最後複製提示詞貼上到圖生圖介面。

第二步,來到圖生圖介面。選擇一個你喜歡的大模型,這裡我仍是以majicrealistic V6模型進行示範。因為這個提示詞將在mov2mov介面對每一幀生效,所以正面提示詞只需要書寫一些質量詞和人物的基本特徵即可,也可以加入你喜歡的lora。接下來選擇適合這個模型的取樣器和取樣步數(作者一般都會先容),尺寸與原圖保持一致,重繪幅度建議設定在0.5以下,以保持影片的相似度。

這裡附上我的提示詞利便大家復刻!

正面提示詞:1girl, solo, dress, long hair, brown hair, solo, dress, long hair, brown hair, realistic, blue dress, looking at viewer, striped, brown eyesair, realistic, blue dress, looking at viewer, striped, brown eyes, (人物特徵)

Best quality, masterpiece, ultra high res, (photorealistic:1.4) (質量詞)

負面提示詞:ng_deepnegative_v1_75t ,badhandv4

上一篇:小米的印度“... 下一篇:2023年股市交...
猜你喜歡
熱門閱讀
同類推薦