Twitter: API cara impede uso para pesquisas acadêmicas

Monetização do recurso dificulta trabalho dos pesquisadores na rede social
Rodrigo Mozelli01/06/2023 00h58
Twitter Elon Musk
Imagem: Rokas Tenys/Shutterstock
Compartilhe esta matéria
Ícone Whatsapp Ícone Whatsapp Ícone X (Tweeter) Ícone Facebook Ícone Linkedin Ícone Telegram Ícone Email

Siga o Olhar Digital no Google Discover

O Twitter já foi um dos pilares da pesquisa acadêmica – uma maneira de tomar o pulso da internet. Mas como o novo proprietário Elon Musk tentou monetizar o serviço, os pesquisadores estão lutando para substituir uma ferramenta que já foi crucial.

Ofertas

Samsung Smart TV 75" Crystal UHD 4K U8100F 2025
Vendido por Amazon
Samsung Smart TV 75" Crystal UHD 4K U8100F 2025
De: R$ 5.299,99
Por: R$ 4.519,90
Notebook Dell Inspiron I15-I1300-A60P 15.6" Full HD 13ª Gen Intel Core i5 16GB 1TB SSD Win 11 Preto Carbono
Vendido por Amazon
Notebook Dell Inspiron I15-I1300-A60P 15.6" Full HD 13ª Gen Intel Core i5 16GB 1TB SSD Win 11 Preto Carbono
Por R$ 3.955,69
Garmin Relógio Venu 3 Branco 45mm com Monitor Cardíaco de Pulso e GPS
Vendido por Amazon
Garmin Relógio Venu 3 Branco 45mm com Monitor Cardíaco de Pulso e GPS
De: R$ 4.699,00
Por: R$ 3.099,00
eufy Câmera S3 Pro Kit 2+1 por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Energia Solar, Visão Noturna MaxColor, Reconhecimento Facial por IA, Compatível com Alexa, Sem taxas mensais
Vendido por Amazon
eufy Câmera S3 Pro Kit 2+1 por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Energia Solar, Visão Noturna MaxColor, Reconhecimento Facial por IA, Compatível com Alexa, Sem taxas mensais
De: R$ 3.499,00
Por: R$ 3.324,00
eufy HomeBase3, Câmera de segurança, Reconhecimento Facial por IA, Armazenamento Local Expansível até 16TB, Criptografia Avançada, Ecossistema de Segurança eufy, Sem taxas mensais
Vendido por Amazon
eufy HomeBase3, Câmera de segurança, Reconhecimento Facial por IA, Armazenamento Local Expansível até 16TB, Criptografia Avançada, Ecossistema de Segurança eufy, Sem taxas mensais
De: R$ 1.049,00
Por: R$ 799,00
Bettdow SmartWatch, Relogio Smartwatch Feminino, 1.27" Ecrã tátil, à prova d'água IP68, 100+ Modos Esportivos, chamada Bluetooth, Compatível com Android iOS, voz por IA (Azul)
Vendido por Amazon
Bettdow SmartWatch, Relogio Smartwatch Feminino, 1.27" Ecrã tátil, à prova d'água IP68, 100+ Modos Esportivos, chamada Bluetooth, Compatível com Android iOS, voz por IA (Azul)
De: R$ 299,00
Por: R$ 241,44
Combo Teclado e Mouse sem fio Logitech POP Icon com Teclas e Botões Personalizáveis, Clique Silencioso, Easy-Switch para até 3 dispositivos e Conexão Bluetooth - Grafite
Vendido por Amazon
Combo Teclado e Mouse sem fio Logitech POP Icon com Teclas e Botões Personalizáveis, Clique Silencioso, Easy-Switch para até 3 dispositivos e Conexão Bluetooth - Grafite
De: R$ 499,90
Por: R$ 388,78
eufy Câmera S330 (eufyCam 3) 2-Cam Kit por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Painel Solar, Forever Power, Reconhecimento Facial IA, Armazenamento Local Até 16TB, Sem Taxa Mensal
Vendido por Amazon
eufy Câmera S330 (eufyCam 3) 2-Cam Kit por anker, Câmera De Segurança Wi-Fi Externa Sem Fio, 4K, Painel Solar, Forever Power, Reconhecimento Facial IA, Armazenamento Local Até 16TB, Sem Taxa Mensal
De: R$ 2.399,00
Por: R$ 2.159,00
soundcore Select 4 Go da Anker, Alto-Falante Bluetooth Portátil, 20H de Bateria, IP67 à Prova d'Água e Poeira, Flutuante, Som Potente, Ideal para Ambientes Internos, Externos e Passeios
Vendido por Amazon
soundcore Select 4 Go da Anker, Alto-Falante Bluetooth Portátil, 20H de Bateria, IP67 à Prova d'Água e Poeira, Flutuante, Som Potente, Ideal para Ambientes Internos, Externos e Passeios
De: R$ 339,00
Por: R$ 188,99
WB Smart Tag Localizador Bluetooth, Rastreador Compatível com o Apple Find My, bateria substituível, Localizador de itens para bolsas
Vendido por Amazon
WB Smart Tag Localizador Bluetooth, Rastreador Compatível com o Apple Find My, bateria substituível, Localizador de itens para bolsas
De: R$ 88,00
Por: R$ 45,00
Anker Nano Carregador Portátil, Power Bank Compacto 10000mAh 45W Máx., Bateria Portátil Essencial para Viagens com Cabo Retrátil InstaCord de 70 cm para iPhone 17/16 Series, iPad, Galaxy, Pixel e Mais
Vendido por Amazon
Anker Nano Carregador Portátil, Power Bank Compacto 10000mAh 45W Máx., Bateria Portátil Essencial para Viagens com Cabo Retrátil InstaCord de 70 cm para iPhone 17/16 Series, iPad, Galaxy, Pixel e Mais
De: R$ 399,00
Por: R$ 379,00
Capa com Teclado Combo Touch para iPad (10ª geração e A16) Com Teclado Retroiluminado Destacável com Suporte, Trackpad Preciso e Tecnologia Smart Connector - Cinza
Vendido por Amazon
Capa com Teclado Combo Touch para iPad (10ª geração e A16) Com Teclado Retroiluminado Destacável com Suporte, Trackpad Preciso e Tecnologia Smart Connector - Cinza
De: R$ 1.629,90
Por: R$ 1.239,90
ULANZI VL-200Bi 200W luz de estúdio bicolor, luz de preenchimento COB, iluminação de saída contínua com controle de APP, 2700K-6500K, 6 cenas, montagem Bowens
Vendido por Amazon
ULANZI VL-200Bi 200W luz de estúdio bicolor, luz de preenchimento COB, iluminação de saída contínua com controle de APP, 2700K-6500K, 6 cenas, montagem Bowens
De: R$ 1.179,00
Por: R$ 943,20
eufy Câmera S350, Camera de Segurança Wi-Fi, 4K Inteligente com Câmera Dupla, Visão 360°, Zoom 8×, Visão Noturna, Babá Eletrônica, Rastreamento por IA, Compatível com Alexa e HomeBase 3
Vendido por Amazon
eufy Câmera S350, Camera de Segurança Wi-Fi, 4K Inteligente com Câmera Dupla, Visão 360°, Zoom 8×, Visão Noturna, Babá Eletrônica, Rastreamento por IA, Compatível com Alexa e HomeBase 3
De: R$ 999,00
Por: R$ 798,99
WAAW By ALOK Fone de Ouvido Bluetooth SENSE 310 Com Cancelamento de Ruído e Assistente de Voz, 30h de Bateria
Vendido por Amazon
WAAW By ALOK Fone de Ouvido Bluetooth SENSE 310 Com Cancelamento de Ruído e Assistente de Voz, 30h de Bateria
De: R$ 329,90
Por: R$ 199,00
WAAW by ALOK Caixa de Som US 200SB DUO Bluetooth 2 em 1, Resistente à Água, Acabamento Metálico, TWS, 20W RMS
Vendido por Amazon
WAAW by ALOK Caixa de Som US 200SB DUO Bluetooth 2 em 1, Resistente à Água, Acabamento Metálico, TWS, 20W RMS
De: R$ 599,90
Por: R$ 476,10
Eufy Cam E340 Câmera De Segurança Wi-Fi Dual Band (2.4/5GHz) Exterior, 360° PTZ, Gravação 24/7, 2000 Lúmens, Detecção de Movimento + Sirene Integrada, Câmera Dupla, Sem Taxa Mensal, Branco
Vendido por Amazon
Eufy Cam E340 Câmera De Segurança Wi-Fi Dual Band (2.4/5GHz) Exterior, 360° PTZ, Gravação 24/7, 2000 Lúmens, Detecção de Movimento + Sirene Integrada, Câmera Dupla, Sem Taxa Mensal, Branco
De: R$ 1.199,00
Por: R$ 1.139,05
Novo Kindle Paperwhite Signature Edition (32 GB) - O Kindle mais rápido já lançado, com luz frontal autoadaptável, carregamento sem fio e bateria que dura semanas - Cor Preta Metálica
Vendido por Amazon
Novo Kindle Paperwhite Signature Edition (32 GB) - O Kindle mais rápido já lançado, com luz frontal autoadaptável, carregamento sem fio e bateria que dura semanas - Cor Preta Metálica
De: R$ 1.199,00
Por: R$ 949,00
Combo Teclado e Mouse Sem Fio Logitech MK250 Bluetooth com Conectividade Rápida e Fácil, Design Compacto, Mouse Ambidestro, Layout ABNT2, Construção Durável, Compatível com PC e Mac - Rosa
Vendido por Amazon
Combo Teclado e Mouse Sem Fio Logitech MK250 Bluetooth com Conectividade Rápida e Fácil, Design Compacto, Mouse Ambidestro, Layout ABNT2, Construção Durável, Compatível com PC e Mac - Rosa
De: R$ 169,90
Por: R$ 155,44
Combo Teclado e Mouse sem fio Logitech MK235 com Conexão USB, Pilhas Inclusas e Layout ABNT2
Vendido por Amazon
Combo Teclado e Mouse sem fio Logitech MK235 com Conexão USB, Pilhas Inclusas e Layout ABNT2
De: R$ 149,90
Por: R$ 119,90
Anker MagGo Power Bank, Carregador Portátil com Certificação Qi2 de 15W, Compatível com MagSafe, 10.000mAh, Tela Inteligente e Suporte Dobrável, para iPhone 17/15/14/13/12, Inclui Cabo USB-C, Branco
Vendido por Amazon
Anker MagGo Power Bank, Carregador Portátil com Certificação Qi2 de 15W, Compatível com MagSafe, 10.000mAh, Tela Inteligente e Suporte Dobrável, para iPhone 17/15/14/13/12, Inclui Cabo USB-C, Branco
De: R$ 699,00
Por: R$ 398,99
Mouse Sem Fio Logitech M330 SILENT com Clique Silencioso, Design Destro, Bateria de 18 Meses, Receptor USB, Compatível com Windows, macOS, ChromeOS e Pilha Inclusa - Preto
Vendido por Amazon
Mouse Sem Fio Logitech M330 SILENT com Clique Silencioso, Design Destro, Bateria de 18 Meses, Receptor USB, Compatível com Windows, macOS, ChromeOS e Pilha Inclusa - Preto
De: R$ 109,90
Por: R$ 79,90
Webcam Full HD Logitech Brio 100 com Microfone Integrado, Proteção de Privacidade, Correção Automática de Luz e Conexão USB-C - Grafite
Vendido por Amazon
Webcam Full HD Logitech Brio 100 com Microfone Integrado, Proteção de Privacidade, Correção Automática de Luz e Conexão USB-C - Grafite
De: R$ 299,90
Por: R$ 222,11

A menos que o Twitter faça outra reviravolta em breve, isso pode encerrar o capítulo de toda uma era de pesquisa. “Pesquisas usando dados de mídia social eram principalmente ‘Twitterologia’”, afirma Gordon Pennycook, professor associado de ciência comportamental da Universidade de Regina, Itália. “Era a fonte primária que as pessoas estavam usando.”

Leia mais:

Até a aquisição de Musk, a API do Twitter – que permite que desenvolvedores terceirizados coletem dados – era considerada uma das melhores da internet.

Ele possibilitou estudos sobre tudo, desde como as pessoas respondem a desastres climáticos até como impedir que a desinformação se espalhe online. Os problemas que eles abordaram estão apenas piorando, tornando esse tipo de pesquisa tão importante quanto antes.

Mas o Twitter decidiu encerrar o acesso gratuito à sua API em fevereiro e lançou níveis pagos em março. A empresa disse que estava “procurando novas maneiras de continuar atendendo” a academia, mas, mesmo assim, começou a cortar sem cerimônia o acesso a usuários terceirizados que não pagavam.

Embora o corte tenha causado problemas para muitos tipos diferentes de usuários, incluindo agências de transporte público e equipes de emergência, os acadêmicos estão entre os grupos mais atingidos.

Pesquisadores que confiam no Twitter há anos contaram ao The Verge que tiveram que parar de usá-lo. É muito caro pagar pelo acesso à sua API, que supostamente disparou para US$ 42 mil (R$ 212,3 mil) por mês ou mais para conta empresarial.

Como resultado, os cientistas perderam ponto de vista importante sobre o comportamento humano. E, enquanto eles lutam para encontrar novas fontes, ainda não há uma alternativa clara.

Ajuda a pesquisadores

O Twitter deu aos pesquisadores uma maneira de observar as reações reais das pessoas em vez de ter que perguntar aos participantes do estudo como eles acham que podem reagir em determinados cenários.

Isso tem sido crucial para a pesquisa de Pennycook sobre estratégias para evitar o fomento de desinformação online, por exemplo, mostrando às pessoas um conteúdo que pede que pensem sobre a precisão antes de compartilhar um link.

Sem poder ver o que um indivíduo realmente twitta, pesquisadores como Pennycook podem se limitar a perguntar a alguém em uma pesquisa que tipo de conteúdo eles compartilhariam nas mídias sociais.

“É basicamente hipotético”, diz Pennycook. “Para as empresas de tecnologia que realmente seriam capazes de implementar uma dessas intervenções, elas não ficariam impressionadas com isso… Tivemos que fazer experimentos em algum lugar para mostrar que realmente pode funcionar na natureza.”

  • Em abril, um grupo de acadêmicos, jornalistas e outros pesquisadores chamado Coalition for Independent Technology Research enviou uma carta ao Twitter pedindo ajuda para manter o acesso;
  • A coalizão buscou pesquisadores e descobriu que as novas restrições do Twitter comprometeram mais de 250 projetos diferentes;
  • Também sinalizaria o fim de pelo menos 76 “esforços de longo prazo”, diz a carta, incluindo pacotes de código e ferramentas;
  • Com a aplicação das novas políticas do Twitter um tanto aleatória (alguns usuários foram expulsos da plataforma antes de outros), a coalizão montou um esforço de ajuda mútua;
  • Os cientistas se esforçaram para coletar o máximo de dados possível antes de perder suas próprias chaves de acesso, e outros se ofereceram para ajudá-los a coletar esses dados ou doaram seu próprio acesso à API do Twitter para os pesquisadores que os perderam.

O nível de API mais acessível do Twitter, de US$ 100 (R$ 505,60) por mês, só permitiria que terceiros coletassem US$ 10 mil (R$ 50,5 mil) por mês. Isso é apenas 0,3% do que eles anteriormente tinham acesso gratuito em um único dia, de acordo com a carta.

E mesmo seu nível empresarial “escandalosamente caro”, argumentou a coalizão, não era suficiente para conduzir alguns estudos ambiciosos ou manter ferramentas importantes.

Uma dessas ferramentas é o Botometer, sistema que classifica a probabilidade de uma conta do Twitter ser um bot.

Embora Musk tenha expressado ceticismo em relação a coisas como pesquisa de desinformação, ele, na verdade, usou o Botometer publicamente – para estimar quantos bots estavam na plataforma durante sua tentativa de sair do acordo que fez para comprar o Twitter. Agora, sua decisão de cobrar pelo acesso à API pode levar ao fim dessa API.

Um aviso no site do Botometer diz que a ferramenta provavelmente deixará de funcionar em breve. “Estamos buscando ativamente soluções para manter este site vivo e gratuito para nossos usuários, o que envolverá o treinamento de novo modelo de aprendizado de máquina e o trabalho com os novos planos de API pagos do Twitter”, diz.

“Observe que, mesmo que seja viável criar uma nova versão do site do Botometer, ela terá funcionalidades e cotas limitadas em comparação com a versão atual devido à API restrita do Twitter.”

O fechamento iminente é um golpe pessoal para o co-criador do Botometer, Kai-Cheng Yang, pesquisador que estuda desinformação e bots nas mídias sociais e que recentemente obteve seu doutorado em informática na Indiana University Bloomington.

“Todo o meu doutorado, toda a minha carreira, é basicamente baseada em dados do Twitter agora. É provável que não esteja mais disponível para o futuro”, disse Yang ao The Verge. Quando questionado sobre como ele pode ter que abordar seu trabalho de maneira diferente agora, ele diz: “Tenho me feito essa pergunta constantemente.”

Outros pesquisadores estão igualmente perplexos. “A plataforma passou de uma das mais transparentes e acessíveis do planeta para o fundo do poço”, diz a signatária da carta Rebekah Tromble, diretora do Instituto de Dados, Democracia e Política (IDDP) da Universidade George Washington.

Alguns dos trabalhos anteriores de Tromble, estudando conversas políticas no Twitter, foram financiados pela empresa antes de mudar suas políticas de API.

“A API do Twitter tem sido absolutamente vital para a pesquisa que venho fazendo há anos”, diz Tromble ao The Verge. E, como Yang, ela precisa se adaptar aos novos esquemas de preços da plataforma. “Simplesmente não estou estudando o Twitter no momento”, afirma.

Mas não há muitas outras opções para coletar dados em massa das mídias sociais. Embora coletar dados de um site sem o uso de uma API seja uma opção, é um trabalho mais tedioso e pode estar repleto de outros riscos.

O Twitter e outras plataformas tentaram reduzir o scraping em parte porque pode ser difícil discernir se está sendo feito para o interesse público ou para fins maliciosos, como phishing.

Como criar lista no Twitter
Imagem: Sattalat Phukkum/Shutterstock

Fim das APIs?

Enquanto isso, outros gigantes da mídia social têm sido ainda mais restritivos do que o Twitter com acesso à API, dificultando a migração para uma plataforma diferente. E as restrições parecem estar ficando mais rígidas – no mês passado, o Reddit anunciou da mesma forma que começaria a limitar o acesso de terceiros à sua API.

“Só me pergunto se este é o começo de empresas que estão se tornando cada vez menos dispostas a ter a API para compartilhamento de dados”, diz Hause Lin, pesquisador de pós-doutorado no MIT e na Universidade de Regina, que desenvolve maneiras de impedir a disseminação de discurso de ódio e desinformação online. “Parece que a paisagem está mudando totalmente, então não sabemos para onde está indo agora.”

Há sinais de que as coisas podem piorar ainda mais. Na semana passada, o inews informou que o Twitter disse a alguns pesquisadores que eles precisariam deletar os dados que já haviam coletado por meio de seu decahose, que fornece amostra aleatória de 10% de todo o conteúdo da plataforma, a menos que eles paguem por uma conta corporativa que possa executar acima de US$ 42 mil (R$ 212,3 mil) por mês. A mudança é “o big data equivalente à queima de livros”, disse um acadêmico não identificado que recebeu o aviso à innews.

O The Verge não conseguiu verificar essas informações com o Twitter -exatamente pela rede social responder rotineiramente às perguntas dos repórteres com emoji de cocô.

Segundo o portal, nenhum dos pesquisadores com quem conversou recebeu tal aviso, e, até agora, parece estar limitado a usuários que pagaram anteriormente para usar o decahose (apenas um uso da API do Twitter que anteriormente seria gratuito ou de baixo custo para acadêmicos).

Tanto Tromble quanto Yang usaram o decahose em seus trabalhos no passado. “Nunca antes o Twitter voltou aos pesquisadores e disse que agora que o contrato acabou, você tem que desistir de todos os dados”, diz Tromble. “É uma farsa completa. Isso devastará um monte de projetos de pesquisa em andamento realmente importantes”.

Outros acadêmicos também contam ao The Verge que o esforço relatado do Twitter para fazer com que os pesquisadores “eliminem todos os dados do Twitter armazenados e em cache em seus sistemas” sem assinatura corporativa seria devastador.

Isso pode impedir que os alunos concluam o trabalho em que investiram anos se forem forçados a excluir os dados antes de publicar suas descobertas. Mesmo que já tenham publicado seu trabalho, o acesso aos dados brutos é o que permite que outros pesquisadores testem a força do estudo ao serem capazes de replicá-lo.

“Isso é muito importante para a ciência transparente”, diz Yang. “Esta é apenas uma preferência pessoal – eu provavelmente iria contra a política do Twitter e ainda compartilharia os dados, tornando-os disponíveis porque acho que a ciência é mais importante neste caso.”

O Twitter foi um ótimo lugar para experimentos de campo digital em parte porque incentivou pessoas de diferentes origens a se encontrarem em um só lugar online. Isso é diferente do Facebook ou do Mastodon, que tendem a ter mais atrito entre os círculos sociais. Essa centralização às vezes fomentava conflitos – mas para os acadêmicos era valiosa.

“Se a pesquisa não for tão boa, não poderemos saber tanto sobre o mundo quanto sabíamos antes”, alega Pennycook. “E talvez possamos descobrir uma maneira de preencher essa lacuna, mas ainda não descobrimos.”

Via The Verge

Já assistiu aos novos vídeos no YouTube do Olhar Digital? Inscreva-se no canal!

Rodrigo Mozelli é jornalista formado pela Universidade Metodista de São Paulo (UMESP) e, atualmente, é redator do Olhar Digital.