Os riscos da IA generativa estão realmente afetando a segurança?

Sempre que uma nova tecnologia surge, ferramentas aparecem acompanhadas de riscos. Confira dicas de como se proteger
Por Claudio Bannwart, editado por Bruno Capozzi 20/12/2023 05h05, atualizada em 21/12/2023 10h01
ciberseguranca-1200x1080
Imagem: Rodrigo Mozelli/Gerado com IA
Compartilhe esta matéria
Ícone Whatsapp Ícone Whatsapp Ícone X (Tweeter) Ícone Facebook Ícone Linkedin Ícone Telegram Ícone Email

Siga o Olhar Digital no Google Discover

Os aplicativos de IA generativa (genAI) têm sido um tema muito discutido, tanto em termos de sua promessa de transformar os negócios quanto de seus possíveis riscos. Sempre que surge uma nova ferramenta, tanto os impactos positivos quanto os negativos podem ser superestimados, e isso definitivamente está acontecendo.

Ofertas

Agenda 2026 Coleção Happy Com Capa Dura Círculos Colors
Vendido por Amazon
Agenda 2026 Coleção Happy Com Capa Dura Círculos Colors
Por R$ 45,90
Suporte para 2 Controles de PlayStation 5 PS5, Apoio de Mesa Gamer, Modelo VN
Vendido por Amazon
Suporte para 2 Controles de PlayStation 5 PS5, Apoio de Mesa Gamer, Modelo VN
De: R$ 39,92
Por: R$ 37,92
Pasta Sanfonada DAC A4 Com 12 Divisões All Black Preto
Vendido por Amazon
Pasta Sanfonada DAC A4 Com 12 Divisões All Black Preto
De: R$ 27,90
Por: R$ 22,59
Carregador Fonte para Notebook Asus 19V 2.37A 45W com Pino Fino 4.0x1.35mm, compatível com VivoBook X543ua X543ma X515 X512 X510U ZenBook 14 UX433FA UX431FA X512F, referência Ad2108020 bivolt
Vendido por Amazon
Carregador Fonte para Notebook Asus 19V 2.37A 45W com Pino Fino 4.0x1.35mm, compatível com VivoBook X543ua X543ma X515 X512 X510U ZenBook 14 UX433FA UX431FA X512F, referência Ad2108020 bivolt
De: R$ 67,44
Por: R$ 59,95
Garmin Relógio Venu 3 Branco 45mm com Monitor Cardíaco de Pulso e GPS
Vendido por Amazon
Garmin Relógio Venu 3 Branco 45mm com Monitor Cardíaco de Pulso e GPS
De: R$ 4.699,00
Por: R$ 3.099,00
eufy Câmera S3 Pro Kit 2+1 por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Energia Solar, Visão Noturna MaxColor, Reconhecimento Facial por IA, Compatível com Alexa, Sem taxas mensais
Vendido por Amazon
eufy Câmera S3 Pro Kit 2+1 por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Energia Solar, Visão Noturna MaxColor, Reconhecimento Facial por IA, Compatível com Alexa, Sem taxas mensais
De: R$ 3.499,00
Por: R$ 3.324,00
eufy HomeBase3, Câmera de segurança, Reconhecimento Facial por IA, Armazenamento Local Expansível até 16TB, Criptografia Avançada, Ecossistema de Segurança eufy, Sem taxas mensais
Vendido por Amazon
eufy HomeBase3, Câmera de segurança, Reconhecimento Facial por IA, Armazenamento Local Expansível até 16TB, Criptografia Avançada, Ecossistema de Segurança eufy, Sem taxas mensais
De: R$ 1.049,00
Por: R$ 799,00
Bettdow SmartWatch, Relogio Smartwatch Feminino, 1.27" Ecrã tátil, à prova d'água IP68, 100+ Modos Esportivos, chamada Bluetooth, Compatível com Android iOS, voz por IA (Azul)
Vendido por Amazon
Bettdow SmartWatch, Relogio Smartwatch Feminino, 1.27" Ecrã tátil, à prova d'água IP68, 100+ Modos Esportivos, chamada Bluetooth, Compatível com Android iOS, voz por IA (Azul)
De: R$ 299,00
Por: R$ 241,44
Combo Teclado e Mouse sem fio Logitech POP Icon com Teclas e Botões Personalizáveis, Clique Silencioso, Easy-Switch para até 3 dispositivos e Conexão Bluetooth - Grafite
Vendido por Amazon
Combo Teclado e Mouse sem fio Logitech POP Icon com Teclas e Botões Personalizáveis, Clique Silencioso, Easy-Switch para até 3 dispositivos e Conexão Bluetooth - Grafite
De: R$ 499,90
Por: R$ 388,78
eufy Câmera S330 (eufyCam 3) 2-Cam Kit por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Painel Solar, Forever Power, Reconhecimento Facial IA, Armazenamento Local Até 16TB, Sem Taxa Mensal
Vendido por Amazon
eufy Câmera S330 (eufyCam 3) 2-Cam Kit por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Painel Solar, Forever Power, Reconhecimento Facial IA, Armazenamento Local Até 16TB, Sem Taxa Mensal
De: R$ 2.399,00
Por: R$ 2.159,00
soundcore Select 4 Go da Anker, Alto-Falante Bluetooth Portátil, 20H de Bateria, IP67 à Prova d'Água e Poeira, Flutuante, Som Potente, Ideal para Ambientes Internos, Externos e Passeios
Vendido por Amazon
soundcore Select 4 Go da Anker, Alto-Falante Bluetooth Portátil, 20H de Bateria, IP67 à Prova d'Água e Poeira, Flutuante, Som Potente, Ideal para Ambientes Internos, Externos e Passeios
De: R$ 339,00
Por: R$ 188,99
WB Smart Tag Localizador Bluetooth, Rastreador Compatível com o Apple Find My, bateria substituível, Localizador de itens para bolsas
Vendido por Amazon
WB Smart Tag Localizador Bluetooth, Rastreador Compatível com o Apple Find My, bateria substituível, Localizador de itens para bolsas
De: R$ 88,00
Por: R$ 45,00
Anker Nano Carregador Portátil, Power Bank Compacto 10000mAh 45W Máx., Bateria Portátil Essencial para Viagens com Cabo Retrátil InstaCord de 70 cm para iPhone 17/16 Series, iPad, Galaxy, Pixel e Mais
Vendido por Amazon
Anker Nano Carregador Portátil, Power Bank Compacto 10000mAh 45W Máx., Bateria Portátil Essencial para Viagens com Cabo Retrátil InstaCord de 70 cm para iPhone 17/16 Series, iPad, Galaxy, Pixel e Mais
De: R$ 399,00
Por: R$ 379,00
Capa com Teclado Combo Touch para iPad (10ª geração e A16) Com Teclado Retroiluminado Destacável com Suporte, Trackpad Preciso e Tecnologia Smart Connector - Cinza
Vendido por Amazon
Capa com Teclado Combo Touch para iPad (10ª geração e A16) Com Teclado Retroiluminado Destacável com Suporte, Trackpad Preciso e Tecnologia Smart Connector - Cinza
De: R$ 1.629,90
Por: R$ 1.239,90
ULANZI VL-200Bi 200W luz de estúdio bicolor, luz de preenchimento COB, iluminação de saída contínua com controle de APP, 2700K-6500K, 6 cenas, montagem Bowens
Vendido por Amazon
ULANZI VL-200Bi 200W luz de estúdio bicolor, luz de preenchimento COB, iluminação de saída contínua com controle de APP, 2700K-6500K, 6 cenas, montagem Bowens
De: R$ 1.179,00
Por: R$ 943,20
eufy Câmera S350, Camera de Segurança Wi-Fi, 4K Inteligente com Câmera Dupla, Visão 360°, Zoom 8×, Visão Noturna, Babá Eletrônica, Rastreamento por IA, Compatível com Alexa e HomeBase 3
Vendido por Amazon
eufy Câmera S350, Camera de Segurança Wi-Fi, 4K Inteligente com Câmera Dupla, Visão 360°, Zoom 8×, Visão Noturna, Babá Eletrônica, Rastreamento por IA, Compatível com Alexa e HomeBase 3
De: R$ 999,00
Por: R$ 798,99
WAAW By ALOK Fone de Ouvido Bluetooth SENSE 310 Com Cancelamento de Ruído e Assistente de Voz, 30h de Bateria
Vendido por Amazon
WAAW By ALOK Fone de Ouvido Bluetooth SENSE 310 Com Cancelamento de Ruído e Assistente de Voz, 30h de Bateria
De: R$ 329,90
Por: R$ 200,29
WAAW by ALOK Caixa de Som US 200SB DUO Bluetooth 2 em 1, Resistente à Água, Acabamento Metálico, TWS, 20W RMS
Vendido por Amazon
WAAW by ALOK Caixa de Som US 200SB DUO Bluetooth 2 em 1, Resistente à Água, Acabamento Metálico, TWS, 20W RMS
De: R$ 599,90
Por: R$ 476,10
Eufy Cam E340 Câmera De Segurança Wi-Fi Dual Band (2.4/5GHz) Exterior, 360° PTZ, Gravação 24/7, 2000 Lúmens, Detecção de Movimento + Sirene Integrada, Câmera Dupla, Sem Taxa Mensal, Branco
Vendido por Amazon
Eufy Cam E340 Câmera De Segurança Wi-Fi Dual Band (2.4/5GHz) Exterior, 360° PTZ, Gravação 24/7, 2000 Lúmens, Detecção de Movimento + Sirene Integrada, Câmera Dupla, Sem Taxa Mensal, Branco
De: R$ 1.199,00
Por: R$ 1.139,05
Novo Kindle Paperwhite Signature Edition (32 GB) - O Kindle mais rápido já lançado, com luz frontal autoadaptável, carregamento sem fio e bateria que dura semanas - Cor Preta Metálica
Vendido por Amazon
Novo Kindle Paperwhite Signature Edition (32 GB) - O Kindle mais rápido já lançado, com luz frontal autoadaptável, carregamento sem fio e bateria que dura semanas - Cor Preta Metálica
De: R$ 1.199,00
Por: R$ 949,00
Combo Teclado e Mouse Sem Fio Logitech MK250 Bluetooth com Conectividade Rápida e Fácil, Design Compacto, Mouse Ambidestro, Layout ABNT2, Construção Durável, Compatível com PC e Mac - Rosa
Vendido por Amazon
Combo Teclado e Mouse Sem Fio Logitech MK250 Bluetooth com Conectividade Rápida e Fácil, Design Compacto, Mouse Ambidestro, Layout ABNT2, Construção Durável, Compatível com PC e Mac - Rosa
De: R$ 169,90
Por: R$ 155,44
Combo Teclado e Mouse sem fio Logitech MK235 com Conexão USB, Pilhas Inclusas e Layout ABNT2
Vendido por Amazon
Combo Teclado e Mouse sem fio Logitech MK235 com Conexão USB, Pilhas Inclusas e Layout ABNT2
De: R$ 149,90
Por: R$ 119,90
Anker MagGo Power Bank, Carregador Portátil com Certificação Qi2 de 15W, Compatível com MagSafe, 10.000mAh, Tela Inteligente e Suporte Dobrável, para iPhone 17/15/14/13/12, Inclui Cabo USB-C, Branco
Vendido por Amazon
Anker MagGo Power Bank, Carregador Portátil com Certificação Qi2 de 15W, Compatível com MagSafe, 10.000mAh, Tela Inteligente e Suporte Dobrável, para iPhone 17/15/14/13/12, Inclui Cabo USB-C, Branco
De: R$ 699,00
Por: R$ 398,99
Mouse Sem Fio Logitech M330 SILENT com Clique Silencioso, Design Destro, Bateria de 18 Meses, Receptor USB, Compatível com Windows, macOS, ChromeOS e Pilha Inclusa - Preto
Vendido por Amazon
Mouse Sem Fio Logitech M330 SILENT com Clique Silencioso, Design Destro, Bateria de 18 Meses, Receptor USB, Compatível com Windows, macOS, ChromeOS e Pilha Inclusa - Preto
De: R$ 109,90
Por: R$ 79,90
Webcam Full HD Logitech Brio 100 com Microfone Integrado, Proteção de Privacidade, Correção Automática de Luz e Conexão USB-C - Grafite
Vendido por Amazon
Webcam Full HD Logitech Brio 100 com Microfone Integrado, Proteção de Privacidade, Correção Automática de Luz e Conexão USB-C - Grafite
De: R$ 299,90
Por: R$ 199,90

No entanto, a genAI é realmente algo que requer mudanças na sua postura de segurança?

Leia mais:

Antes de me aprofundar nos riscos da genAI, vamos analisar alguns pontos relacionados aos storage buckets de SaaS, onde são armazenados os dados de software como serviço (SaaS). Os buckets são fechados por padrão; o assinante desse serviço mantém o controle sobre quem acessa o conteúdo.

Portanto, os que estão com vazamento são resultado de um problema no gerenciamento de acesso; não é uma falha do provedor. Uma maneira de atenuar esses problemas é com procedimentos que controlam o acesso e as atividades nos consoles que provisionam e gerenciam os buckets. A outra maneira é com ferramentas de gerenciamento de postura, que ajudam a encontrá-los abertos e a reforçar as políticas de acesso.

Ilustração de silhueta de pessoa com chip no lugar do cérebro para representar conceito de inteligência artificial
(Imagem: Pedro Spadoni via DALL-E/Olhar Digital)

Os aplicativos da genAI são vulneráveis por design

Agora, vamos comparar os buckets com a genAI. A maioria dos usuários da genAI trabalha com aplicativos voltados para o público (por exemplo, ChatGPT e DALL-E). Esses aplicativos são softwares como serviço (SaaS), que podem ser liberados ou não para uso na sua empresa. No momento, para a maioria das empresas, os aplicativos genAI não são aprovados, embora muitas pessoas os utilizem de qualquer forma.

Ao contrário dos compartimentos que são fechados por padrão, os aplicativos genAI são abertos por padrão. Os prompts que as pessoas fornecem e as respostas que recebem são todos públicos, e o modelo retém um histórico dessas informações para fins de treinamento. Tudo o que é obtido em uma interação pode aparecer em interações subsequentes com outras pessoas.

Esse aspecto aberto torna a genAI arriscada para informações confidenciais. É da natureza da genAI vazar, o que significa que o uso de serviços públicos dá aos provedores permissão para compartilhar suas informações com terceiros.

Ao contrário dos buckets, em que os assinantes mantêm o controle, os assinantes dos aplicativos genAI não têm quase nenhum controle. Embora você possa desativar o histórico da sua conta, os provedores ainda armazenam e processam dados por algum tempo. As informações confidenciais carregadas ainda ficam expostas fora da empresa, o que não é uma boa ideia, principalmente para setores altamente regulamentados.

inteligencia-artificial
Imagem: shutterstock/jittawit21

Mitigando os riscos de saída de dados confidenciais

Alguns produtos de segurança dedicados à genAI estão no mercado, mas eles duplicam a funcionalidade que você provavelmente já possui.

Os produtos autônomos de prevenção contra perda de dados (DLP) projetados apenas para aplicativos genAI fazem basicamente apenas uma coisa, além de adicionar custo e complexidade à configuração e ao gerenciamento, e não se integrarão a uma estratégia abrangente de proteção de dados.

Ele repete toda a sua estrutura de política de DLP, tentando espelhar suas políticas de DLP de SaaS de uso geral no mecanismo de DLP da genAI. Com o passar do tempo, essas políticas se desviarão. Ou seja, o produto de DLP de uso geral que você já usa é suficiente.

Outro tipo de ferramenta potencialmente útil para a segurança da genAI são os rastreadores de dados. Eles permitem que você rastreie para onde os arquivos vão e quem os está usando. No entanto, não faz sentido comprar mais um produto pontual em mais um mercado quando a maioria dos fornecedores de security service edge (SSE) já inclui algum tipo de funcionalidade de análise que oferece o mesmo recurso.

inteligência artifical hollywood
Imagem: Login / Shutterstock.com

Como você pode reduzir os riscos de informações confidenciais aparecerem em aplicativos públicos de genAI? Essas três técnicas são fundamentais (e podem soar familiares):

  • Controle o acesso aos dados que as pessoas fornecem aos aplicativos genAI. O princípio do menor privilégio se aplica aqui; as empresas devem sempre controlar o acesso a informações confidenciais. Se uma função comercial não exigir esse acesso, não o forneça. Sem acesso, uma pessoa não pode carregá-las por engano ou de forma maliciosa — na genAI ou em qualquer outro lugar.
  • Controle o acesso e as permissões do aplicativo genAI. Da mesma forma, as empresas devem sempre bloquear o acesso aos aplicativos genAI e restringir adequadamente o que é permitido dentro deles. O ideal é aplicar controles de acesso a todos os aplicativos SaaS (inclusive genAI) e a todas as atividades neles realizadas. Todos os SSEs baseados em proxy podem bloquear o acesso, enquanto apenas alguns podem restringir as atividades.
  • Ganhe visibilidade com o DLP inline. A capacidade de interceptar dados confidenciais no caminho de saída é crucial. Se o acesso e a atividade de uma pessoa são permitidos, mas os dados específicos em si não devem ser expostos publicamente à genAI, o DLP inline pode atenuar o risco, o que a maioria dos produtos SSE oferece.
  • A DLP inline observa todas as tentativas de movimentação de informações confidenciais em tempo real e, em seguida, se interpõe. Ele pode oferecer uma mensagem de orientação ou simplesmente remover as informações confidenciais antes de entregar o restante.
Chip de inteligência artificial
Chip de inteligência artificial – iStock

E quanto às ameaças de entrada?

Os atacantes estão bastante interessados em comprometer os aplicativos genAI. Um risco muito real é entregar cargas maliciosas de volta à empresa. Um prompt manipulado por um agente mal-intencionado pode preencher os modelos de genAI com sites falsos que contêm malware, por exemplo.

Imagine que alguém de sua empresa faça uma solicitação pedindo recomendações de viagens. Se a resposta do genAI agregar sugestões de viagens benignas com conteúdo malicioso dos sites impostores, um invasor terá contornado o aplicativo e qualquer segurança que sua organização tenha imposto no lado de saída.

O comprometimento das respostas da genAI são um problema muito maior a ser considerado. Espero que os provedores estejam atentos a esses riscos e desenvolvam seus serviços de forma a resistir a esse tipo de abuso.

Ilustração de robô humanoide interagindo com diversas formas de conteúdo em holograma para representar conceito de inteligência artificial
(Imagem: Pedro Spadoni via DALL-E/Olhar Digital)

Amplie as práticas recomendadas de segurança existentes para abranger a genAI

Os aplicativos de genAI são novidades atraentes com alguns riscos inerentes, mas isso não significa que você precise de ferramentas de segurança totalmente novas para proteger sua empresa. Uma coisa nova e brilhante não requer uma resposta nova e brilhante.

Os líderes de segurança podem reduzir a exposição ao risco da genAI empregando as mesmas técnicas, ferramentas e conhecimentos que já possuem. Controle o acesso a dados confidenciais. Controle o acesso aos aplicativos genAI e as atividades dentro deles. Use controles inline baseados em políticas para garantir que mesmo os usuários aprovados não possam fazer upload de algo confidencial por engano.

A genAI parece ter vindo para ficar, pois continua a ganhar popularidade e todos nós nos tornamos mais proficientes em seu uso. Como acontece com qualquer nova ferramenta projetada para aumentar a eficiência, devemos adotá-la. No entanto, devemos adotá-la usando o mesmo bom senso que aplicamos ao uso de qualquer nova ferramenta para garantir que estamos mantendo os dados confidenciais seguros.

Claudio Bannwart
Colunista

Country manager Brasil da Netskope

Bruno Capozzi é jornalista formado pela Faculdade Cásper Líbero e mestre em Ciências Sociais pela PUC-SP, tendo como foco a pesquisa de redes sociais e tecnologia.