1 前期準(zhǔn)備 Stable Diffusion以及剪映我就不介紹啦。 1. 極虎漫剪前面分享小說(shuō)轉(zhuǎn)視頻的時(shí)候有分享過(guò)這個(gè)工具,感興趣的可以去看看。(本文只用此工具里面的智能分鏡以及關(guān)鍵詞推理) 極虎漫剪下載地址:https://tiger./landing 極虎漫剪的使用方法以及介紹: Stable Diffusion|小說(shuō)轉(zhuǎn)視頻/小說(shuō)推文全流程制作分享 2. Agent Scheduler插件安裝,Agent Scheduler是一個(gè)Stable Diffusion里面的一個(gè)批量生成圖片的插件。 Github地址:https://github.com/ArtVentureX/sd-webui-agent-scheduler 有三種安裝方法: 1. 啟動(dòng)“Stable Diffusion”,點(diǎn)擊“擴(kuò)展”—“可下載”—在點(diǎn)擊“加載擴(kuò)展列表”,搜索關(guān)鍵詞“agent scheduler”,點(diǎn)擊“安裝“,安裝完成之后,重啟一下“Stable Diffusion”即可。 2. 從網(wǎng)址安裝,復(fù)制Github的URL,將插件的URL粘貼到“擴(kuò)展的git倉(cāng)庫(kù)網(wǎng)址”上,在點(diǎn)擊”安裝“,安裝完成之后,重啟一下”Stable Diffusion“即可。 插件Github URL:https://github.com/ArtVentureX/sd-webui-agent-scheduler.git 3. 插件安裝包安裝,在Github下載該插件的安裝包并安裝到“Stable Diffusion”目錄中的“extensions”文件夾中即可。 2 繪本制作 安裝好所有的插件以及工具之后,就可以開始之后繪本啦。 1. 首先,啟動(dòng)“Stable Diffusion”,并打開“極虎漫剪”。 2. 打開“極虎漫剪”,沒注冊(cè)的可以點(diǎn)擊右上角注冊(cè),已注冊(cè)并登錄的,點(diǎn)擊“創(chuàng)作視頻”,輸入”項(xiàng)目名稱”然后再點(diǎn)擊“創(chuàng)建項(xiàng)目”。 3. 點(diǎn)擊中間的“腳本文件導(dǎo)入”,分鏡標(biāo)識(shí)符選擇“通過(guò)“智能解析”分鏡”然后點(diǎn)擊“導(dǎo)入文件”選擇準(zhǔn)備好的繪本導(dǎo)入即可。如果自己已經(jīng)分好鏡了,建議使用“Excel”導(dǎo)入。 4. 繪本導(dǎo)入了之后,它會(huì)自動(dòng)幫我們進(jìn)行智能分鏡。分完鏡之后,點(diǎn)擊左上角的“推理關(guān)鍵詞”按鈕,關(guān)鍵詞推理完之后,點(diǎn)擊“下一步”即可。 5. 到了“批量繪圖”這一步之后,它就會(huì)將關(guān)鍵詞翻譯成英文,極虎漫剪就可以用到這里了,我們只需要這里的分鏡以及關(guān)鍵詞。如果想繼續(xù)用“極虎漫剪”可以直接“開始繪圖”。之前已經(jīng)詳細(xì)介紹了使用“極虎漫剪”的方法,本文將介紹使用Stable Diffusion的插件“agent scheduler”來(lái)進(jìn)行制作。 6. 打開剛剛已啟動(dòng)的Stable Diffusion,選擇一個(gè)用于制作繪本的大模型。 這里的大模型我選擇的是“manmaruMix_v30”很適合做兒童繪本的大模型,可以在“liblib”和“Civitai”上下載此模型。(在這里感謝這位模型作者的分享,謝謝?。?/p> 7. 輸入正向提示詞和反向提示詞。反向提示詞用一個(gè)通用的即可,正向提示詞這里在最前面可以加一些質(zhì)量的提示詞,然后后面的加上剛剛用極虎漫剪推理出來(lái)的提示詞。 對(duì)了,差點(diǎn)忘了!,點(diǎn)擊菜單欄上的“Agent Scheduler”插件,然后點(diǎn)擊“暫停”,在我們還未添加完所有鏡頭的提示詞之前,最好先暫停,以防止在參數(shù)未設(shè)置好的情況下就開始生成。 8. 設(shè)置繪本生成的參數(shù),這里根據(jù)自己的需求設(shè)置一下就行。 9. 設(shè)置好以上參數(shù)之后,點(diǎn)擊“生成”下面的“排隊(duì)”,它就會(huì)將這第一鏡的提示詞以及參數(shù),發(fā)送到“Agent Scheduler”插件里面,然后將“任務(wù)ID”改為1或者第一鏡的內(nèi)容,這樣可以更清晰的看到每一鏡的參數(shù)。 對(duì)于剩余的鏡頭,只需將剩余鏡頭的提示詞依次粘貼到正向提示詞中,然后點(diǎn)擊“排隊(duì)”即可。生成參數(shù)可保持不變。 10. 將所有的鏡頭添加完之后,可以檢查一下看還有沒有遺漏的或者有沒有需要改的參數(shù),然后點(diǎn)擊左上角的“Resumer”就開始生成啦。 11. 當(dāng)圖片生成完成后,點(diǎn)擊“任務(wù)歷史”可以查看剛剛生成的所有圖片。如果對(duì)結(jié)果不滿意,可以雙擊列表并調(diào)整提示詞和參數(shù)。在調(diào)整后,點(diǎn)擊右側(cè)操作區(qū)的重新生成按鈕,即可重新生成該鏡頭的圖片。對(duì)滿意的圖片可以,點(diǎn)擊保存,將圖片保存下來(lái)。 圖片都準(zhǔn)備就緒之后,可以通過(guò)圖片處理工具進(jìn)行文字添加,由此,靜態(tài)的繪本便得以呈現(xiàn)。對(duì)于希望將其轉(zhuǎn)化為視頻的,可以繼續(xù)往下看。 3 視頻合成 在制作視頻之前,我們可以利用繪本內(nèi)容生成一段音頻,以便后續(xù)更便捷地生成字幕。 1. 打開“TTSMaker”,將繪本內(nèi)容復(fù)制并粘貼到輸入框中。接著,選擇語(yǔ)言以及音色。如果要進(jìn)行更多設(shè)置,可以點(diǎn)擊“更多設(shè)置”;若對(duì)此保持默認(rèn),只需點(diǎn)擊“轉(zhuǎn)換為語(yǔ)音”,即可生成音頻。 TTSMaker鏈接:https:/// 2. 生成完成之后,點(diǎn)擊下載音頻即可。 3. 音頻生成完之后,打開“剪映”,將剛剛準(zhǔn)備好的圖片以及音頻導(dǎo)入到剪映。 4. 導(dǎo)入完成之后,可以把音頻的氣口處理一下。例如,如果某些地方的氣口過(guò)長(zhǎng),可以適當(dāng)剪短一些,這樣會(huì)使聽感更加舒適。 5. 處理完音頻之后,就可以開始生成字幕了,點(diǎn)擊左上角的“文本”-“智能字幕”-“文稿匹配”將繪本內(nèi)容復(fù)制粘貼進(jìn)去,然后點(diǎn)擊開始匹配。 6. 字幕生成完成之后,選中所有的字幕,然后點(diǎn)擊右側(cè)有個(gè)鎖的圖標(biāo),將字幕鎖住。(鎖住字幕可以更方便的將圖片與音頻對(duì)上) 7. 這一步就比較繁瑣了,需要將圖片跟音頻對(duì)上。可以一邊看“極虎漫剪”生成分鏡,然后一邊手動(dòng)的將圖片對(duì)上音頻(如果嫌麻煩,可以在“極虎漫剪”上完成)。 8. 接下來(lái)可以將字幕顏色以及字體稍微調(diào)整一下,然后添加一個(gè)背景音樂。 9. 將背景音樂剪到一個(gè)合適的長(zhǎng)度,然后背景音樂的音量調(diào)整到“-13.0dB” 左右,然后配音的音量調(diào)整到“8.0dB”左右即可。確保背景音樂的聲音不會(huì)超過(guò)配音的音量。 10. 目前的圖片還是靜態(tài)的,這里可以讓圖片稍微動(dòng)起來(lái)一些。例如,可以給每張圖片添加上下或左右移動(dòng)的關(guān)鍵幀,這樣可以讓整個(gè)視頻在視覺上更加生動(dòng)、有趣。 這里我將每一張圖片都放大到了120%,并且給每一張圖片都打了上下移動(dòng)的關(guān)鍵幀(第一張圖片的起始幀為100,結(jié)束幀為-200;第二張圖片的起始幀為-100,結(jié)束幀為200,以此類推)。 10. 到這里就制作完成啦,如果還想加點(diǎn)東西,可以稍微加一些音效、特效等等。調(diào)整完之后,點(diǎn)擊左上方的“文件”-“導(dǎo)出”導(dǎo)出視頻。 4 最后 以上就是今天的所有分享?,F(xiàn)在大部分孩子或?qū)W生都具備寫作的能力,如果將他們所寫的作文轉(zhuǎn)化為具有生動(dòng)情節(jié)的繪本、小視頻,或者以孩子或自己為主角生成繪本,將帶來(lái)一種獨(dú)特的代入感,使整個(gè)寫作或閱讀過(guò)程更加有趣。 如果本文對(duì)你有幫助或者給你帶來(lái)了一些創(chuàng)作靈感,歡迎點(diǎn)贊、在看、轉(zhuǎn)發(fā),謝謝~ |
|