Erro em IA do TikTok permitiu colocar até discurso nazista em vídeos

Erro técnico na ferramenta de IA Symphony Digital Avatars do TikTok permitiu, sem nenhum filtro, que qualquer texto fosse dublado em vídeo
Bruno Ignacio de Lima22/06/2024 15h20
tiktok
Imagem: BINK0NTAN/Shutterstock
Compartilhe esta matéria
Ícone Whatsapp Ícone Whatsapp Ícone X (Tweeter) Ícone Facebook Ícone Linkedin Ícone Telegram Ícone Email

O TikTok, popular plataforma de compartilhamento de vídeos, recentemente lançou uma nova ferramenta chamada Symphony Digital Avatars. Essa ferramenta utiliza inteligência artificial (IA) para criar avatares digitais realistas que podem ser usados em anúncios e outros conteúdos. No entanto, o lançamento não foi tão suave quanto o esperado.

IA do TikTok Symphony Digital Avatars foi acidentalmente lançada sem filtro

Inicialmente, o TikTok lançou uma versão interna da IA Symphony Digital Avatars sem salvaguardas adequadas. Isso permitiu que os usuários criassem vídeos com conteúdo inadequado, incluindo citações de Hitler e mensagens perigosas. Embora a ferramenta tenha sido projetada para empresas gerarem anúncios usando dublagem com atores pagos e IA, um erro permitiu que qualquer pessoa com uma conta pessoal a experimentasse.

tiktok
TikTok Symphony apresenta novas ferramentas para criação de anúncios no TikTok. (Imagem: TikTok / Divulgação)

Leia mais:

A CNN descobriu o problema e criou vídeos perturbadores usando a ferramenta defeituosa. Isso levou o TikTok a agir rapidamente e remover a versão problemática. Agora, a versão correta da Symphony Digital Avatars inclui uma marca d’água para indicar que o conteúdo foi gerado por IA. Além disso, a empresa reforçou as diretrizes de uso para evitar abusos futuros.

Erro em IA do TikTok já foi corrigido, segundo porta-voz

Symphony Digital Avatars do TikTok
Opções de avatares de estoque da plataforma e idiomas da Symphony – Imagem: divulgação TikTok

Laura Perez, porta-voz do TikTok, confirmou que o erro técnico foi resolvido em comunicado enviado ao The Verge. No entanto, preocupações permanecem sobre o potencial de abuso da ferramenta. Afinal, a criação de avatares digitais realistas pode ser usada para disseminar informações falsas, discurso de ódio ou outros conteúdos prejudiciais.

O TikTok diz que está comprometido em melhorar a moderação e garantir que a Symphony Digital Avatars seja usada de maneira responsável. A empresa está ciente de que a IA pode ser uma faca de dois gumes e está trabalhando para encontrar um equilíbrio entre criatividade e segurança.

Bruno Ignacio é jornalista formado pela Faculdade Cásper Líbero. Com 10 anos de experiência, é especialista na cobertura de tecnologia. Atualmente, é editor de Dicas e Tutoriais no Olhar Digital.