Vidu aiuma plataforma de vídeo de inteligência artificial generativa desenvolvida pela empresa chinesa Tecnologia Shengshuanunciou hoje uma atualização para o seu mais recente modelo do primeiro trimestre, com um recurso avançado de “referência para video” alimentado pelo entendimento semântico.
A empresa está desenvolvendo um modelo de vídeo generativo que compete com o SoraI da Openai, que pode produzir sequências de vídeo vívidas. A atualização permite o contexto de vídeo mais rico para a produção de cenas de vídeo envolvendo vários elementos que permanecem os mesmos entre os clipes de quadro para quadro.
Os usuários agora podem fazer upload de até sete imagens de referência e incluir um prompt que os combina para a IA usar em uma cena. Por exemplo, a IA usa o que a empresa chama de “entendimento semântico” para fazer referência às imagens e relacioná -las ao prompt de texto e até inferir elementos ausentes para gerar objetos -chave.
“Esta atualização rompe os limites do que os criadores pensavam que poderiam fazer com o vídeo da IA”, disse o executivo -chefe Luo Yihang. “Estamos nos aproximando de permitir que os usuários criem cenas totalmente realizadas, completas com um elenco detalhado de personagens, objetos e origens, expandindo a referência de várias imagens para apoiar até sete entradas”.
Por exemplo, um usuário pode enviar uma imagem de uma jovem mulher em um vestido verde, uma cena florestal idílica e uma coruja. Em seguida, insira o aviso: “A mulher toca o violino na floresta enquanto a coruja voa para baixo e pousa em um ramo próximo ao nascer do sol”.
Yihang disse que o motor semântico do Vidu Q1 gerará um violino em suas mãos, preservando a consistência da cena e a qualidade narrativa em todo o clipe. Usando essa tecnologia, os criadores não precisam mais enfrentar obstáculos técnicos íngremes ao tentar criar cenas complexas. Um prompt de texto e imagens são tudo o que precisam ao produzir cenas de vídeo consistentes.
A Vidu está competindo com o VEO 3 da Google LLC, lançado no final de maio. Seus recursos generativos de vídeo incluem avisos naturais em inglês e imagens de referência ao lado de uma ferramenta de cinema chamada Flow, que permite que os usuários gerenciem o design narrativo para desenvolver filmes curtos de IA inteiros que incluem visuais, efeitos especiais e áudio, incluindo fala.
Shengshu anunciou uma parceria com o estúdio de animação de Los Angeles, Aura Productions, no final de março, para Libere um curta-metragem de 50 episódios Série de anime de ficção científica totalmente gerada pela IA. O projeto busca redefinir o entretenimento digital usando recursos de IA para aumentar as técnicas narrativas tradicionais. Ele está previsto para lançamento nas principais plataformas de mídia social deste ano.
“A IA não é mais apenas uma ferramenta; é um aprimoramento criativo que nos permite escalar a produção, mantendo a integridade artística”, disse DT Carpenter, showrunner da Aura, disse à Variety sobre o projeto.
Imagem: Vidu AI
Apoie nosso conteúdo gratuito aberto compartilhando e envolvendo nosso conteúdo e comunidade.
Junte -se ao theCube Rede de confiança de ex -alunos
Onde os líderes de tecnologia se conectam, compartilham inteligência e crie oportunidades
11.4K+
Rede de ex -alunos do Cube
N-LEVEL E TÉCNICO
Especialistas em domínio
Conecte -se a 11.413 mais líderes do setor de nossa rede de líderes de tecnologia e negócios, formando um efeito de rede confiável único.
A Siliconangle Media é um líder reconhecido em inovação de mídia digital, que serve públicos e marcas inovadoras, reunindo tecnologia de ponta, conteúdo influente, idéias estratégicas e envolvimento do público em tempo real. Como empresa controladora de SiliconangleAssim, Rede de TheCubeAssim, THECUBE PESQUISAAssim, Cube365Assim, thecube ai e TheCube Superstudios – como os estabelecidos no Vale do Silício e na Bolsa de Valores de Nova York (NYSE) – Siliconangle Media opera na interseção da mídia, tecnologia e IA. .
Fundada pelos visionários de tecnologia John Furrier e Dave Vellante, a Siliconangle Media construiu um poderoso ecossistema de marcas de mídia digital líder do setor, com um alcance de mais de 15 milhões de profissionais de tecnologia de elite. O novo e proprietário da empresa, a nuvem de vídeo AI está abrindo a interação do público, alavancando a rede neural thecubaii.com para ajudar as empresas de tecnologia a tomar decisões orientadas a dados e permanecer na vanguarda das conversas do setor.