Multi-Ref Video: jopa neljä hahmoa ja ympäristö yhdessä klipissä

Multi-Ref Video luo yhden klipin viitteistä: jopa neljä kohdetta (hahmoja, eläimiä, esineitä) ja yksi ympäristö yhdistettynä generaattoriin, jonka jälkeen kuvailet kohtauksen omin sanoin mainitsemalla jokaisen viitteen sen nimellä. Samat hahmot toistuvat klipistä toiseen, yhdessä, samassa paikassa.

Aloita character sheetistä, ei LoRAsta

Tämä on vaihe, joka ratkaisee, näyttääkö hahmo itseltään. Multi-Ref Video ei käytä LoRAa. Hahmon ulkonäkö tulee sen character sheetistä: viidestä viitenäkymästä samasta hahmosta (Bust, front; Bust ¾ left; Bust ¾ right; Full body, front; Full body, back or profile).

Hahmo ilman character sheetiä renderöidään yhdestä kuvasta, ja samankaltaisuus on selvästi heikompi. Tämä on yleisin yllätys: hahmo, jolla on hyvin koulutettu LoRA mutta ei sheetiä, tulee ulos löyhänä versiona itsestään.

Sovellus ilmoittaa tästä. Multi-Ref Videossa tällainen hahmo näyttää No character sheet, ja klikkaamalla avautuu sen profiili. Jos klikkaat Generate jonkin tällaisen hahmon ollessa yhdistettynä, Limited likeness -ikkuna tarjoaa vaihtoehdon Create the character sheet tai Generate anyway.

Luo sheet avaamalla My characters, valitse hahmo ja sen Character sheets -osio, sitten klikkaa New sheet. Voit pudottaa omat kuvasi, generoida näkymät hahmon ominaisuuksista (kuva-LoRAlla, jos valokuvia ei ole) tai täydentää puuttuvat näkymät olemassa olevien pohjalta. Tee yksi sheet per asu tai asenne: kun yhdistät hahmon, Multi-Ref Video kysyy, mitä sheetiä käytetään. Kaikki selitetään kohdassa Character sheets.

Hahmon luominen vaatii lisenssin. Demossa Lea ja Lucas tulevat valmiiden character sheettien kanssa, joten voit kokeilla heti.

Esineet, eläimet ja ympäristöt

Hahmot eivät ole ainoita viitteitä. Library-osiossa kaksi sivua pitää muita: Objects & animals ja Places & sets. Jokainen kohde kokoaa jopa viisi kuvaa, otsikon ja kuvauksen, ja yhdistyy Multi-Ref Videoon samalla tavalla kuin hahmo. Klipissä voi olla enintään yksi ympäristö.

Rakenna kohtaus

1. Käytä Multi-Ref Videossa Add a subject -toimintoa (hahmo, eläin tai esine, enintään neljä) ja Add a setting -toimintoa (yksi). Jokainen viite yhdistyy generaattoriin.

   

2. Kuvaile kohtaus ja mainitse jokainen viite @-merkillä ja sen nimellä, esimerkiksi: "@Lea antaa kirjeen @Lucasille aseman laiturilla, ilta valaistus".

3. Jos haluat apua, AI-painike kirjoittaa ideasi tekstiksi, joka on valmis videomoottorille (kuva, toiminta, kamera, valo, ääni, repliikit), ja säilyttää @-viitteet. Se toimii verkossa ilman krediittikustannuksia tai offline-tilassa omalla tietokoneellasi, kun paikallinen avustaja on asennettu (2,8 Gt, ensimmäisellä klikkauksella tai kohdasta Settings > Components).

   

   

Jokaisella viitteellä on Strength välillä 0-2: 0 ohittaa sen, 1 on normaali, yli 1 se vie enemmän tilaa klipissä. Siemen on oletuksena automaattinen, uusi joka renderöintiin: lukitse se toistaaksesi saman oton muuttamalla yhtä asiaa kerrallaan (katso seed).

Kirjoita kohtaus

AI-painike soveltaa näitä sääntöjä puolestasi. Jos kirjoitat kohtauksen itse:

• Mainitse jokainen viite @-merkillä ja sen nimellä. Sovellus yhdistää sen kuviinsa renderöintihetkellä.
• Kerro kuinka monta ihmistä on kuvassa ja missä kukin seisoo ("Lea vasemmalla, Lucas oikealla, ei ketään muuta etualalla"). Tämä estää hahmon ilmestymisen kahdesti.
• Yksi toiminto kerrallaan, näkyvin elein: malli näyttää sen, mitä voidaan nähdä, ei sitä, mitä tunnetaan.
• Lyhyt repliikki lainausmerkeissä, sidottuna sen sanojaan: noin kaksi tai kolme sanaa sekunnissa klippiä. Pidempänä puhe hyppää sanoja tai muuttuu selostukseksi.
• Kuvaile mitä on, älä koskaan sitä mitä ei saa tapahtua: moottori ohittaa kieltosäännöt.
• Ei-ihminen hahmo (olento, lohikäärme): kerro mitä se on kohtauksessa ja kuvaile se sellaisena profiilissaan ("siivet, kynnet, häntä", ei "lohikäärme-asukäsi"), muuten moottori muuttaa sen puvussa olevaksi henkilöksi.
• Ympäristö: kuva videon formaatissa (pysty, vaaka tai neliö); muuten se rajataan keskeltä.

Tila, formaatti ja hinta

• Tila: Quality tai Ultra. Fast ei ole käytettävissä useilla viitteillä (katso Fast, Quality tai Ultra).
• Formaatti: pysty, vaaka tai neliö, 480p (vain Quality), 720p tai 1080p.
• Kesto: automaattinen tai 5, 10 tai 20 sekuntia, äänellä tai ilman.

Quality-tilassa Multi-Ref-klipin hinta on sama kuin tavallisen saman formaatin klipin (katso cloud video). Ultralla on oma kiinteä hinta per klippi Multi-Ref Videossa, joka näkyy sovelluksessa ennen renderöintiä, ja se toimii vain Cloud GPU:lla.

Demossa Multi-Ref Videota voi kokeilla ilmaisella videolla, 720p-tarkkuudella ja enintään 5 sekunnin kestolle.

Omalla tietokoneellasi tai verkossa

Windowsilla Multi-Ref Video voi myös renderöidä omalla näytönohjaimellasi Quality-tilassa. Se vaatii tuoreen NVIDIA-kortin, jossa on vähintään 8 Gt, sekä kerran ladattavan komponentin (2,2 Gt, välilehdeltä tai kohdasta Settings > Components). Paikallinen renderöinti kestää noin kaksi kertaa niin kauan kuin klippi ilman viitteitä. Macilla paikallinen video ei ole vielä käytettävissä: vaihda Cloud GPU:hun.

Verkossa renderöinti odottaa enintään 30 minuuttia vapaata konetta, jonka jälkeen sillä on 30 minuuttia laskea. Edistymispalkki seuraa todellista renderöintiaikaa ja näyttää, odottaako se konetta vai viimeistelee klippiä. Jos renderöinti hylätään, se peruutetaan eikä mitään veloiteta.

Palaa klippiin myöhemmin

Gallery-osiossa (Videos-välilehti) Reuse Multi-Ref-klipissä avaa Multi-Ref Videon uudelleen sen viitteet yhdistettynä, teksti, formaatti ja siemen mukana. Muuta yksi asia, generoi uudelleen.

Yksittäisen hahmon johdonmukaisuudesta kuvissa ja tavallisissa klipeissä katso character consistency.