O novo modelo de geração de vídeo com IA da ByteDance, o Dreamina Seedance 2.0, chega ao CapCut

A OpenAI pode estar reduzindo seus esforços no mercado de geração de vídeos com o encerramento de seu aplicativo Sora, mas a ByteDance confirmou nesta quinta-feira que seu novo modelo de áudio e vídeo, o Dreamina Seedance 2.0, está sendo implementado em sua plataforma de edição, o CapCut.

A ByteDance afirma que o modelo permite que os criadores elaborem, editem e sincronizem conteúdo de vídeo e áudio usando prompts, imagens ou vídeos de referência.

A implementação gradual começará com usuários do CapCut no Brasil, Indonésia, Malásia, México, Filipinas, Tailândia e Vietnã, com mais mercados sendo adicionados ao longo do tempo.

A notícia do lançamento no CapCut segue uma reportagem recente que afirmava que a implementação global do modelo seria suspensa, enquanto a empresa trabalhava para resolver questões de propriedade intelectual que geraram críticas de Hollywood por supostas violações de direitos autorais. Isso provavelmente explica o número limitado de mercados onde o modelo está disponível atualmente no CapCut.

Na China, o modelo está disponível para usuários do aplicativo Jianying, da ByteDance.

O modelo de geração de vídeo funciona sem imagens de referência, mesmo que o criador use apenas algumas palavras para descrever a cena que tem em mente, afirma a ByteDance em seu anúncio. O CapCut também é bom em renderizar texturas, movimentos e iluminação realistas em uma variedade de perspectivas e ângulos visuais, o que, segundo a empresa, poderia ser usado para editar, aprimorar ou corrigir as próprias filmagens dos criadores.

Outro caso de uso seria permitir que os criadores testem ideias potenciais com base em conceitos iniciais ou esboços antes de filmar o vídeo real.

Além disso, o Dreamina Seedance 2.0 pode ser usado para uma ampla variedade de conteúdos, incluindo receitas culinárias, tutoriais de fitness, visões gerais de negócios ou produtos e vídeos com conteúdo focado em movimento ou ação, áreas em que os modelos de vídeo com IA historicamente enfrentaram desafios, explica a empresa.

No lançamento, o modelo suporta clipes de até 15 segundos de duração em seis proporções de tela.

No CapCut, o modelo será implementado em diferentes áreas, incluindo recursos de edição como o AI Video e ferramentas de geração como o Video Studio. Ele também chegará à plataforma de geração de IA da ByteDance, Dreamina, e à sua plataforma de marketing, Pippit.

Dada sua capacidade de criar conteúdo realista, a ByteDance afirma ter adicionado restrições de segurança, de modo que o modelo não terá a capacidade de criar vídeos a partir de imagens ou vídeos que contenham rostos reais. O CapCut também bloqueará o uso de geração não autorizada de propriedade intelectual. (No entanto, se as restrições estivessem funcionando corretamente, o modelo já estaria disponível nos Estados Unidos. Provavelmente, ainda estão sendo feitos mais ajustes.)

O conteúdo produzido pelo Dreamina Seedance 2.0 também incluirá uma marca d’água invisível, o que ajudará a identificar o conteúdo criado com o modelo quando ele for compartilhado fora da plataforma, acrescentou a ByteDance. Isso poderia auxiliar em questões como solicitações de remoção por parte de detentores de direitos, caso o modelo permitisse a passagem de conteúdo protegido por direitos autorais.

A ByteDance afirma que fará parcerias com especialistas e comunidades criativas à medida que o modelo for lançado, para iterar e aprimorar suas capacidades.

A StrictlyVC dá início ao ano em São Francisco. Participe de conversas informais e sem filtros com líderes do setor, insights privilegiados de investidores de capital de risco e conexões de alto valor que realmente fazem a diferença. Os ingressos são limitados.

A lacuna de habilidades em IA está aqui, diz empresa de IA, e usuários avançados estão saindo na frente Rebecca Bellan

A lacuna de habilidades em IA está aqui, diz empresa de IA, e usuários avançados estão saindo na frente

A lacuna de habilidades em IA está aqui, diz empresa de IA, e usuários avançados estão saindo na frente

Google revela TurboQuant, um novo algoritmo de compressão de memória para IA — e sim, a internet está chamando-o de ‘Pied Piper’ Sarah Perez

Google revela o TurboQuant, um novo algoritmo de compressão de memória de IA — e sim, a internet está chamando-o de ‘Pied Piper’

Google revela o TurboQuant, um novo algoritmo de compressão de memória de IA — e sim, a internet está chamando-o de ‘Pied Piper’

Mulher do Kentucky rejeita oferta de US$ 26 milhões para transformar sua fazenda em um data center Graham Starr

Mulher do Kentucky rejeita oferta de US$ 26 milhões para transformar sua fazenda em um data center

Mulher do Kentucky rejeita oferta de US$ 26 milhões para transformar sua fazenda em um data center

Alguém vazou publicamente um kit de exploração capaz de hackear milhões de iPhones Lorenzo Franceschi-Bicchierai Zack Whittaker

Alguém vazou publicamente um kit de exploração capaz de hackear milhões de iPhones

Alguém vazou publicamente um kit de exploração capaz de hackear milhões de iPhones

A Cursor admite que seu novo modelo de codificação foi construído com base no Kimi da Moonshot AI Anthony Ha

A Cursor admite que seu novo modelo de codificação foi construído com base no Kimi da Moonshot AI

A Cursor admite que seu novo modelo de codificação foi construído com base no Kimi da Moonshot AI

Delve é acusada de enganar clientes com “conformidade falsa” Anthony Ha

Delve é acusada de enganar clientes com “conformidade falsa”

Delve é acusada de enganar clientes com “conformidade falsa”

Um tour exclusivo pelo laboratório Trainium da Amazon, o chip que conquistou a Anthropic, a OpenAI e até mesmo a Apple Julie Bort

Um tour exclusivo pelo laboratório Trainium da Amazon, o chip que conquistou a Anthropic, a OpenAI e até mesmo a Apple

Um tour exclusivo pelo laboratório Trainium da Amazon, o chip que conquistou a Anthropic, a OpenAI e até mesmo a Apple