Imghorce 新主題 Embracing Autumn 擁抱秋季上線:
https://imghorce.oopus.info/post-autumn-20241026
十月的新英格蘭地區,被葉子染成了彩色。就做秋季的主題吧,雖然已是初冬氣氛。於是給自己設定的一個禮拜挑戰。一方面,如果不趕緊做完,秋天也許就溜走了。另一方面,也想試試看一個禮拜能做成什麼樣。
首先是文案,找參考文獻倒是不難。從出版物和網頁裡面找到了這些參考讀物:
Autumn, the neglected season in climate change research
Historical Autumn Traditions
Jennifer Radden – The Nature of Melancholy_ From Aristotle to Kristeva (2002)
Seasonal affective disorder (SAD)
接下來就是丟給 chatgpt,匯總成一篇短 blog. 效果還不錯,強行樂觀積極是 chatgpt 習慣。所以在初稿的基礎上做修改也不能少。這樣生成出來的初稿能擺脫不少我自己的巨大的情緒和私貨的影響,也挺好。
生圖部分極大依靠 lora model. 下面列出來這次所有用過的 lora models:
https://civitai.com/models/833475/spatulapaint
https://civitai.com/models/705130/claude-monet-flux
https://civitai.com/models/122594/microverse-creator
https://huggingface.co/WizWhite/wizard-s-paper-model-universe
https://civitai.com/models/253577/vintage-portrait-art-sdxlflux
https://civitai.com/models/64863/cute-oil-impasto-chibi-sd15-flux
https://civitai.com/models/647926/zen-ink-wash-sumi-e-sdxl-pony-flux
因為設定以 Flux Schnell 模型為核心,會帶來一些挑戰。主要原因是 Schnell 模型是 Dev 蒸餾(distill)出來的更弱(對設備要求更低)的模型。另一個原因是,大部分 lora model 基於 Dev 模型訓練,在 Schnell 上或多或少會有一些偏差。特別是照片和真實風格的 lora. 人臉、手指、焦平面大概率會不太對。所以完全放棄了真實和照片風格的 lora.
這次極大依靠 lora model 而幾乎沒使用 controlnet 模型來控制構圖的原因是,發現 controlnet model 在 flux.1 裡面用起來不太順暢(可能未來也會探索這方面的技術,讓它更順暢)。不順暢有幾方面:第一,controlnet 加上 lora 的速度比較慢;第二,controlnet 生圖的時候原圖中吸引人的點常常會消失,因此如果沒有硬性控制的需求,給 model 創作自由的 prompts 十幾張裡面常常能有幾張有趣的;第三 ,lora 的風格控制和 controlnet 的構圖控制的相互撕扯中常常會生成有嚴重瑕疵的圖片。不過在實驗中發現一個有趣的設定:把 controlnet 的 strength 設為 0 或者 0.1, 把 start 和 end 都設為 0, controlnet 和 lora 就比較相處得來了。
最後,在生成圖片完畢,Photoshop 基於 AI 的 remove tool, spot healing brush tool, generative fill 給後期修圖工作帶來了巨大的便利。無論是去掉多餘的人、物還是無意義的文字,都很方便可以去掉。
這張的「決定性瞬間」特別喜歡: