ਸਟੋਰੀਬੋਰਡ ਤੋਂ ਵੀਡੀਓ ਵਿੱਚ ਪਾਤਰਾਂ ਦੀ ਇਕਸਾਰਤਾ
VideoGen ਹਰ ਸੀਨ ਵਿੱਚ ਇੱਕੋ ਜਿਹੇ ਲੋਕਾਂ ਨੂੰ ਇੱਕੋ ਜਿਹਾ ਦਿਖਾਈ ਦੇਣ ਲਈ ਕੈਰੇਕਟਰ ਗਰਿੱਡਾਂ ਅਤੇ ਲੜੀਵਾਰ ਜਨਰੇਸ਼ਨ ਦੀ ਵਰਤੋਂ ਕਿਵੇਂ ਕਰਦਾ ਹੈ।

ਮਲਟੀ-ਸੀਨ AI ਵੀਡੀਓ ਇੱਕ ਅਨੁਮਾਨਯੋਗ ਤਰੀਕੇ ਨਾਲ ਅਸਫਲ ਹੁੰਦਾ ਹੈ: ਹੀਰੋ ਹਰ ਸ਼ਾਟ ਵਿੱਚ ਵੱਖਰਾ ਦਿਖਾਈ ਦਿੰਦਾ ਹੈ।
ਸਟੋਰੀਬੋਰਡ ਟੂ ਵੀਡੀਓ (Storyboard to video) ਇੱਕ ਤਿਆਰ ਵੀਡੀਓ ਵਿੱਚ ਦ੍ਰਿਸ਼ਾਂ ਦੀ ਇੱਕ ਸੰਗਠਿਤ ਸੂਚੀ ਨੂੰ ਬਦਲਣ ਲਈ VideoGen ਦਾ ਵਰਕਫਲੋ ਹੈ। ਔਖਾ ਹਿੱਸਾ ਇੱਕ ਚੰਗਾ ਫਰੇਮ ਤਿਆਰ ਕਰਨਾ ਨਹੀਂ ਹੈ। ਔਖਾ ਹਿੱਸਾ ਇਹ ਹੈ ਕਿ ਪੂਰੀ ਬਿਰਤਾਂਤ ਵਿੱਚ ਇੱਕੋ ਜਿਹੇ ਪਾਤਰਾਂ, ਪਹਿਰਾਵੇ ਅਤੇ ਸ਼ੈਲੀ ਨੂੰ ਬਰਕਰਾਰ ਰੱਖਣਾ।
ਕੈਰੇਕਟਰ ਗ੍ਰਿਡ (Character grids)
ਸੀਨ ਮੀਡੀਆ ਤਿਆਰ ਕਰਨ ਤੋਂ ਪਹਿਲਾਂ, ਅਸੀਂ ਇੱਕ ਕੈਰੇਕਟਰ ਗ੍ਰਿਡ ਬਣਾਉਂਦੇ ਹਾਂ: ਇੱਕ ਰੈਫਰੈਂਸ ਸ਼ੀਟ ਜੋ ਕਈ ਕੋਣਾਂ ਤੋਂ ਹਰੇਕ ਪਾਤਰ ਦੇ ਚਿਹਰੇ, ਸਰੀਰ ਅਤੇ ਪਹਿਰਾਵੇ ਨੂੰ ਕੈਪਚਰ ਕਰਦੀ ਹੈ। ਬਾਅਦ ਵਾਲੇ ਸੀਨ ਸਿਰਫ਼ ਟੈਕਸਟ ਵਰਣਨ 'ਤੇ ਭਰੋਸਾ ਕਰਨ ਦੀ ਬਜਾਏ ਉਸ ਗ੍ਰਿਡ ਨੂੰ ਵਿਜ਼ੂਅਲ ਐਂਕਰ ਵਜੋਂ ਵਰਤਦੇ ਹਨ।
ਟੈਕਸਟ ਪ੍ਰੋਂਪਟ ਬਦਲ ਜਾਂਦੇ ਹਨ। "ਲਾਲ ਜੈਕਟ ਵਿੱਚ ਇੱਕ ਔਰਤ" ਪੰਜ ਸੀਨਾਂ ਵਿੱਚ ਪੰਜ ਵੱਖ-ਵੱਖ ਔਰਤਾਂ ਬਣ ਸਕਦੀ ਹੈ। ਇੱਕ ਗ੍ਰਿਡ ਮਾਡਲ ਨੂੰ ਮੇਲ ਕਰਨ ਲਈ ਕੁਝ ਠੋਸ ਦਿੰਦਾ ਹੈ।
ਕ੍ਰਮਵਾਰ ਜਨਰੇਸ਼ਨ (Sequential generation)
ਅਸੀਂ ਕ੍ਰਮਵਾਰ ਸੀਨ ਤਿਆਰ ਕਰਦੇ ਹਾਂ। ਹਰੇਕ ਬਾਅਦ ਵਾਲਾ ਸੀਨ ਪਹਿਲਾਂ ਤੋਂ ਪ੍ਰਵਾਨਿਤ ਫਰੇਮਾਂ ਦਾ ਹਵਾਲਾ ਦੇ ਸਕਦਾ ਹੈ, ਇਸ ਲਈ ਪਛਾਣ ਰੀਸੈਟ ਹੋਣ ਦੀ ਬਜਾਏ ਬਰਕਰਾਰ ਰਹਿੰਦੀ ਹੈ।
ਉਹ ਕ੍ਰਮਵਾਰ ਪ੍ਰਕਿਰਿਆ ਸਮਾਨੰਤਰ ਰੂਪ ਵਿੱਚ ਹਰ ਸੀਨ ਨੂੰ ਬਣਾਉਣ ਨਾਲੋਂ ਹੌਲੀ ਹੈ, ਪਰ ਇਹ ਇੱਕ ਸੁਮੇਲ ਵਾਲੀ ਲਘੂ ਫਿਲਮ ਅਤੇ ਸ਼ਕਲ-ਸੂਰਤ ਵਿੱਚ ਮਿਲਦੇ-ਜੁਲਦੇ ਵਿਅਕਤੀਆਂ ਦੇ ਸਲਾਈਡਸ਼ੋ ਵਿੱਚ ਅੰਤਰ ਹੈ। ਸਟੋਰੀਬੋਰਡ ਟੂ ਵੀਡੀਓ ਲਈ, ਇਕਸਾਰਤਾ ਕੱਚੀ ਰਫ਼ਤਾਰ ਨਾਲੋਂ ਬਿਹਤਰ ਹੈ।
API ਅਤੇ ਉਤਪਾਦ ਟੀਮਾਂ ਲਈ ਇਹ ਮਹੱਤਵਪੂਰਨ ਕਿਉਂ ਹੈ
ਜੇਕਰ ਤੁਸੀਂ ਵੱਡੇ ਪੱਧਰ 'ਤੇ ਬਿਰਤਾਂਤ ਜਾਂ ਪਾਤਰ-ਅਧਾਰਿਤ ਵੀਡੀਓ ਬਣਾ ਰਹੇ ਹੋ, ਤਾਂ ਤੁਹਾਨੂੰ ਇੱਕ ਅਜਿਹੇ ਵਰਕਫਲੋ ਦੀ ਲੋੜ ਹੈ ਜੋ ਇਕਸਾਰਤਾ ਨੂੰ ਇੱਕ ਮੁੱਖ ਕੰਸਟ੍ਰੇਂਟ (constraint) ਵਜੋਂ ਦੇਖੇ:
- ਵਾਰ-ਵਾਰ ਆਉਣ ਵਾਲੇ ਪਾਤਰਾਂ ਲਈ ਰੈਫਰੈਂਸ ਅਸੈਟਸ
- ਕੈਰੀ-ਫਾਰਵਰਡ ਸੰਦਰਭ ਦੇ ਨਾਲ ਕ੍ਰਮਵਾਰ ਜਨਰੇਸ਼ਨ
- ਜਦੋਂ ਕੋਈ ਸੀਨ ਅਜੇ ਵੀ ਭਟਕਦਾ ਹੈ ਤਾਂ ਐਡੀਟਰ ਪਾਸ
ਸਟੋਰੀਬੋਰਡ ਟੂ ਵੀਡੀਓ ਇਹਨਾਂ ਹਿੱਸਿਆਂ ਨੂੰ ਜੋੜਦਾ ਹੈ ਤਾਂ ਜੋ ਤੁਸੀਂ ਹਰ ਕੱਟ 'ਤੇ ਪਛਾਣ ਨੂੰ ਹੱਥੀਂ ਠੀਕ ਕੀਤੇ ਬਿਨਾਂ ਮਲਟੀ-ਸੀਨ ਵੀਡੀਓਜ਼ ਪੇਸ਼ ਕਰ ਸਕੋ।
ਸਟੋਰੀਬੋਰਡ ਟੂ ਵੀਡੀਓ ਅਜ਼ਮਾਓ ਜਾਂ storyboard-to-video ਵਰਕਫਲੋ ਲਈ API ਦਸਤਾਵੇਜ਼ ਪੜ੍ਹੋ।



Anton Koenig