OpenAI potrebbe ridurre i suoi sforzi nel mercato della generazione video con la chiusura della sua app Sora, ma giovedì ByteDance ha confermato che il suo nuovo modello audio e video, Dreamina semina 2.0è ora disponibile nella sua piattaforma di modifying, CapCut.
ByteDance afferma che il modello consente ai creatori di creare bozze, modificare e sincronizzare contenuti video e audio utilizzando suggerimenti, immagini o video di riferimento.
L’implementazione graduale inizierà con gli utenti CapCut in Brasile, Indonesia, Malesia, Messico, Filippine, Tailandia e Vietnam, con l’aggiunta di altri mercati nel tempo.
La notizia del lancio su CapCut segue un recente rapporto secondo il quale il lancio globale del modello sarebbe stato sospeso, mentre si lavorava per affrontare le questioni relative alla proprietà intellettuale che avevano attirato critiche da parte di Hollywood. presunta violazione del copyright. Ciò probabilmente spiega il numero limitato di mercati in cui il modello è attualmente disponibile all’interno di CapCut.
In Cina, il modello è disponibile per gli utenti dell’app Jianying di ByteDance.
Il modello di generazione video funziona senza immagini di riferimento, anche se il creatore usa solo poche parole per descrivere la scena che ha in mente, afferma ByteDance nel suo annuncio. CapCut è anche bravo a rendere trame, movimenti e luci realistici attraverso una gamma di prospettive e angoli visivi, che secondo l’azienda potrebbero essere utilizzati per modificare, migliorare o correggere i filmati dei creatori.
Un altro caso d’uso consentirebbe ai creatori di testare potenziali idee basate su concetti o schizzi iniziali prima di filmare il video reale.
Inoltre, Dreamina Seedance 2.0 può essere utilizzata per un’ampia gamma di contenuti, tra cui ricette di cucina, tutorial di health, panoramiche aziendali o di prodotti e video con contenuti incentrati sul movimento o sull’azione, in cui i modelli video AI hanno storicamente affrontato sfide, spiega l’azienda.
Al momento del lancio, il modello supporta clip della durata massima di 15 secondi in sei proporzioni.
In CapCut, il modello verrà distribuito in numerous aree, comprese funzionalità di modifying come AI Video e strumenti di generazione come Video Studio. Arriverà anche alla piattaforma di generazione AI di ByteDance, Dreamina, e alla sua piattaforma di advertising, Pippit.
Information la sua capacità di creare contenuti realistici, ByteDance afferma di aver aggiunto restrizioni di sicurezza, quindi la modella non avrà la possibilità di realizzare video da immagini o video che contengono volti reali. CapCut bloccherà inoltre l’uso della generazione non autorizzata di proprietà intellettuale. (Tuttavia, se le restrizioni funzionassero correttamente, il modello sarebbe già disponibile negli Stati Uniti. Probabilmente sono ancora in corso ulteriori modifiche.)
Il contenuto prodotto da Dreamina Seedance 2.0 includerà anche una filigrana invisibile, che aiuterà a identificare il contenuto realizzato con il modello quando sarà condiviso fuori piattaforma, ha aggiunto ByteDance. Ciò potrebbe aiutare in cose come le richieste di rimozione da parte dei titolari dei diritti nel caso in cui il modello consentisse il passaggio di contenuti protetti da copyright.
ByteDance afferma che collaborerà con esperti e comunità artistic man mano che il modello verrà lanciato per iterare e migliorare le capacità del modello.
