← 文章

掌控 Seedance 2.5:一個來源,一個維度

5 分鐘閱讀Liang
掌控 Seedance 2.5:一個來源,一個維度 的封面圖

Seedance 2.5 在使用參考素材時,支援指定特定的維度。例如,你可以要求它只參考動作,不參考渲染。

這些維度可能包括:

  • 動作
  • 渲染
  • 背景
  • 其他視覺或時間上的屬性

這提供了一個思考控制的好方法:不只是我們提供了哪些參考,還有每個參考負責結果的哪一部分。

多來源模型

Seedance 2.5 支援幾種輸入類型:

  • 文字
  • 圖片
  • 影片
  • 音訊

每個來源都可能影響輸出的一個或多個維度。例如,我們可以用文字、圖片和影片來控制動作。但一旦有多個來源影響同一個維度,最終的動作就會變成文字、圖片與影片彼此交互作用的結果。

這有時會產生出乎意料的好結果,但也讓結果更難控制。

若要更高的控制力,就減少影響同一維度的來源數量。理想上,一個來源只負責一個維度。

如果由影片負責動作,就讓它主要控制動作,而不要同時要求文字和圖片參考也強烈定義同樣的動作。

為什麼粗略的 Layout 可能效果不好

先說清楚,我不是說粗略的 layout 不能用,而是說得到好結果的機率比較低。

模型可以參考動作,而動作本質上就是一連串的姿勢——或者更廣義地說,是形狀。這些形狀本身就包含了位置。

所以如果任務是參考位置但不參考姿勢,這個指令本身就令人困惑。模型必須參考一個屬性,同時選擇性地排除另一個與它緊密相連的屬性。結果它很容易沿用輸入中尚未定稿的姿勢。

你可能會問:如果我再額外提供一個姿勢參考呢?會有幫助嗎?

也許。但更有用的問題是:為什麼不從一開始就提供一張位置和姿勢都正確的圖?

建議

1. 只提供正確的資訊

如果某樣東西不對,就不要把它給模型。

不要: 要一份包含 A、B、C 的餐點,然後再要模型把 C 拿掉。

要: 直接要 A 和 B。

提供錯誤的資訊再要模型忽略其中一部分,只會製造不必要的模糊。如果某項資訊不應該影響結果,最好一開始就不要提供。

2. 讓一個管道控制一個維度

如果你同時用分鏡或關鍵影格與文字來控制鏡頭,就不要期待模型會精確地遵循分鏡。文字也在影響同一個維度。

若要更高的控制力,讓每個管道負責一個特定的維度,而不是讓多個管道爭奪同一件事。

3. 同時測試具體與高層次的提示詞

同時嘗試光譜的兩端:

  • 具體: 明確描述想要的動作、節奏、姿勢與其他細節。
  • 高層次意圖: 描述這個鏡頭要達成什麼,給模型更多空間去解決。

更詳細的提示詞不一定能帶來更多控制或更好的結果。

一個實用原則

爭奪定義同一維度的來源越多,結果就越難預測。來源之間的職責劃分越清楚,就越容易理解每個輸入在做什麼。

對於可控的生成,一個實用的預設很簡單:

只提供正確的資訊,並盡可能讓一個來源控制一個維度。

( 更多文章 )