A Luma bemutatta a Concepts nevű új technológiát, amellyel generatív modelleket lehet pontosan és kreatívan irányítani. A módszer lényege, hogy egy-egy “Concept” akár egyetlen vagy néhány példából megtanulható, majd ezek a tudáselemek egymással szabadon kombinálhatók.
Az első bevezetett csomag a Camera Motion Concepts, amely a Ray2 videógeneráló modellben teszi lehetővé a kameramozgások megbízható és összetehető irányítását.
Megbízható és kombinálható mozgások
A megtanult kameramozgások a legkülönfélébb képkivágásokban és stílusokban is konzekvensen reprodukálhatók. Ami igazán újszerű: a Concepts természetes nyelvi leírással, generálás közben kombinálhatók egymással – szemben a hagyományos LoRA-val vagy finomhangolással, ahol ez nem ilyen egyszerű. Így olyan kameramozgások is létrehozhatók, amelyekre a valóságban nincs is példa, mégis hihetően néznek ki a videóban. Néhány bemutatott kombináció: kihúzás és lefelé döntés, jobbra körözés kézikamera-effekttel, illetve “liftajtó” effekt dolly zoommal összepárosítva.
A modell minősége nem sérül
A Luma kiemeli, hogy a Ray2 továbbra is csúcsminőségű, produkcióra alkalmas modell marad: az új Concepts megtanítása nem rontja a stílusbeli sokszínűséget vagy a modell egyéb képességeit – ellentétben a hagyományos testreszabási módszerekkel, amelyek gyakran az adott tanítóadat stílusára szűkítik a modellt.
A kameramozgások a Ray2 már meglévő funkcióival is együtt használhatók, például kép-videóvá konvertálással, kezdő- és végső kulcskockákkal, illetve hurok (loop) móddal.
Elérhetőség
A Camera Motion Concepts már elérhető a Dream Machine-ben. A Luma jelezte, hogy a közeljövőben további Concepts-eket és új képességeket hoz a Ray2-höz és a Dream Machine-hez.