Nas eleições de 2022, as pesquisas eleitorais foram duramente criticadas em razão das divergências entre os levantamentos divulgados na véspera do primeiro turno e os resultados efetivamente apurados nas urnas. Um dia antes da eleição, o então presidente Jair Bolsonaro (PL) aparecia com 37% e 36% dos votos válidos nas pesquisas do Ipec (ex-Ibope) e Datafolha, mas acabou recebendo 43% dos votos. Luiz Inácio Lula da Silva (PT) marcava 51% e 50% nos mesmos levantamentos, mas terminou com 48%. Discrepâncias também foram observadas nas disputas estaduais e na eleição para o Senado.
Embora tenham tomado conta das discussões há dois anos, diferenças inesperadas entre as pesquisas eleitorais e os resultados das urnas não são exclusivas do último pleito e, segundo especialistas ouvidos pelo Estadão, ocorrem em todas as eleições. Em 2018, por exemplo, as pesquisas de véspera não indicavam que Romeu Zema (Novo) e Wilson Witzel, então filiado ao PSC, terminariam o primeiro turno na liderança. Naquele mesmo ano, Bolsonaro, então do PSL, tinha 41% na pesquisa de véspera do Ibope, enquanto Fernando Haddad (PT) tinha 25%. O resultado final nas urnas foi 46% para Bolsonaro e 29% para o petista.
A campanha eleitoral deste ano deve colocar as pesquisas eleitorais novamente em evidência. Para esclarecer dúvidas de eleitores de todo o País que vão às urnas em outubro, o Estadão conversou com especialistas em pesquisas eleitorais para explicar, detalhadamente, como os levantamentos são realizados e quais cuidados são necessários ao interpretá-los.
Como saber se uma pesquisa é confiável?
Com o aumento das pesquisas autofinanciadas (aquelas pagas pela própria empresa que realizou o levantamento), a atenção aos detalhes metodológicos se torna ainda mais crucial. Especialistas alertam sobre práticas e problemas que podem comprometer a qualidade dos resultados, exigindo maior cautela dos eleitores.
“Via de regra, quanto menos detalhes sobre sua metodologia o instituto divulgar, se atendo apenas ao que é minimamente obrigatório segundo o TSE, mais cuidado deve-se ter com relação às suas pesquisas”, afirma Raphael Nishimura, membro da Associação Americana para Pesquisa de Opinião Pública (AAPOR) e diretor de amostragem na Universidade de Michigan.
Outro ponto destacado pelo especialista é verificar a fonte de dados utilizada para a amostragem ou ponderação de dados. Se o instituto usa apenas dados do Censo 2010, isso deve acender um grande sinal de alerta, pois há dados mais recentes da população, como os da Pesquisa Nacional por Amostra de Domicílios (Pnad) Contínua.
“O questionário também é importante: se a pesquisa não utiliza um disco para apresentar os candidatos (em pesquisas presenciais) ou não realiza uma rotação aleatória da ordem em que os candidatos são apresentados na pergunta de intenção de voto estimulada (em pesquisas telefônicas ou online), há um grande risco de ocorrer vieses de mensuração. Como os institutos são obrigados a depositar os seus questionários no site de consulta de pesquisas do TSE, isso é relativamente fácil de verificar”, diz Nishimura.
Outro ponto levantado pelo especialista é a ponderação de dados e o uso de cotas na amostra, que são as entrevistas com pessoas de determinado perfil que a pesquisa precisa coletar para reduzir potenciais vieses de seleção e não resposta. Por exemplo, se uma população é composta por metade de homens e metade de mulheres, deve-se entrevistar a mesma proporção de cada gênero. Segundo ele, atualmente é impensável conduzir pesquisas de opinião pública sem usar ao menos uma dessas técnicas. A maioria dos institutos utiliza uma ou ambas, mas se não mencionar isso, deve-se levantar um sinal de alerta.
Adicionalmente, é importante verificar se a pesquisa foi registrada no TSE e quem pagou por ela; no caso de pesquisas municipais, assegurar que há entrevistados de todas as regiões da cidade; prestar atenção nas datas de coleta das entrevistas, especialmente se há um espaçamento grande entre elas; e examinar a redação da pergunta para identificar possíveis vieses.
Como as pesquisas afetam o rumo das campanhas?
O Estadão conversou com estrategistas que trabalham para os principais candidatos à Prefeitura de São Paulo para entender como as pesquisas eleitorais são utilizadas nas campanhas. De forma reservada, todos disseram que tanto as pesquisas internas, contratadas pelos próprios candidatos, quanto as de institutos renomados, como a Quaest e o Datafolha, são utilizadas para monitorar o cenário político-eleitoral.
No dia a dia, as campanhas estão com os olhos voltados para a pesquisa de tracking, realizada diariamente com uma amostra menor de eleitores. Essa metodologia permite acompanhar a evolução da curva de intenção de voto de cada candidato e avaliar rapidamente os efeitos de eventos como debates e sabatinas sobre a disputa eleitoral.
Além das pesquisas quantitativas, as campanhas realizam pesquisas qualitativas, conhecidas como “qualis”. Essas pesquisas são importantes para entender o que está na cabeça do eleitor – quais são seus desejos, anseios e visões sobre os candidatos. Elas ajudam a direcionar a mensagem das peças de comunicação dos candidatos, ajustar posicionamentos e testar materiais de comunicação, além de verificar se as propostas desenhadas fazem sentido para o eleitorado.
Segundo esses profissionais ouvidos pela reportagem, que pediram anonimato, as campanhas não mudam sua estratégia com base em uma única pesquisa, mas sim a partir de um conjunto de informações. No entanto, tendências verificadas em pesquisas externas, como do Datafolha, podem acender “alertas” e iniciar discussões dentro das campanhas.
Por que as pesquisas diferem do resultado das urnas?
Amplamente utilizadas pelas campanhas, as pesquisas eleitorais podem ser um recurso valioso para os eleitores. A premissa básica para que esses levantamentos ajudem e não atrapalhem é enxergá-los como uma fotografia do cenário político atual.
Embora as pesquisas sejam úteis para diagnosticar a conjuntura política e até mesmo orientar as campanhas em suas estratégias, elas não devem ser vistas como uma tentativa de prever o resultado final das urnas, pois o contexto político é dinâmico e o voto dos eleitores é influenciado por fatores que as pesquisas muitas vezes não conseguem captar, especialmente aqueles que surgem nos momentos finais do pleito. A única pesquisa que tem o objetivo de alcançar o resultado das urnas é a de boca de urna, que não foi feita em 2022.
CEO do Ipec (ex-Ibope), Márcia Cavallari considera naturais as divergências entre as pesquisas de véspera e o resultado final das eleições. Ela explica que essas diferenças são causadas pelas mudanças de última hora que ocorrem em todas as eleições. A polêmica em torno de 2022 ocorreu principalmente devido à ausência da pesquisa de boca de urna, que geralmente capta essas movimentações finais da eleição e minimiza a diferença entre os resultados das pesquisas e o registro efetivo das urnas, diz a especialista. No caso de 2018, por exemplo, Bolsonaro subiu para 45% na boca de urna e Haddad para 28%, num cenário mais próximo do que foi o resultado efetivo.
O Censo tem algum impacto nas pesquisas?
Embora os diagnósticos sobre 2022 variem entre especialistas, há desafios que podem ajudar a explicar as discrepâncias observadas. Uma dificuldade enfrentada pelos institutos foi o atraso na divulgação dos dados do Censo, prejudicando a criação de uma amostra mais precisa do eleitorado brasileiro.
Este ano, porém, os desafios são maiores, pois ainda não foram divulgadas outras variáveis do Censo que são utilizadas para a elaboração das amostras, como escolaridade, renda, raça, religião, PEA (População Economicamente Ativa) e não PEA.
“Caso o Censo não divulgue esses dados dos municípios antes das eleições, os últimos disponíveis para a elaboração das amostras municipais são os do Censo de 2010, teremos que trabalhar com estimativas levando a amostras ainda menos precisas”, alerta Márcia Cavallari.
A abstenção é um problema concreto para o resultado de uma pesquisa?
Um empecilho amplamente discutido, especialmente na última eleição, é a abstenção. No Brasil, como o voto é obrigatório, especialistas afirmam que é menos provável que um eleitor admita que não irá votar. Por isso, os institutos desenvolveram métodos próprios para calcular a abstenção, que atinge cerca de 20% dos eleitores, impactando especialmente os mais pobres. Em 2022, a abstenção desproporcional entre eleitores pobres pode ter sido decisiva para a superestimação dos votos de Lula nas pesquisas de véspera, avalia Felipe Nunes, diretor da Quaest.
“Foi preciso ponderar as intenções de voto pela probabilidade de cada respondente ir de fato votar para chegar a uma estimativa mais aproximada do quadro eleitoral que se apresentava. Os modelos de Likely Voter (eleitor provável), comuns em democracias cujo voto não é obrigatório, construídos depois da coleta, parecem ajudar a tornar as estimativas da fotografia eleitoral mais próximas da descrição real do quadro”, diz Nunes, que adiciona o alto grau de indecisão dos eleitores e a crescente desconfiança em relação ao trabalho científico à lista de desafios enfrentados pelos institutos.
Por que os resultados se aproximam mais do real perto da eleição?
Muitos fatores ajudam a explicar o fato de as pesquisas nem sempre chegarem perto do resultado das urnas. Além da metodologia em si, a própria ordem das perguntas dos questionários pode influenciar a resposta que o eleitor dá. A distância até o pleito é outro fator que influencia. Em 2020, na véspera do 1º turno para a eleição à Prefeitura de São Paulo, o tucano Bruno Covas tinha 33% de intenção de voto no Datafolha, contra 15% de Boulos. Dois meses antes, em setembro, Covas tinha 20% e o líder sem-teto, 9%. Quem ocupava a segunda posição era Celso Russomanno (Republicanos).
“Empiricamente, as estimativas das pesquisas pré-eleitorais tendem a se aproximar dos resultados das eleições conforme se aproxima o dia da eleição. No Brasil, muitos eleitores tendem a decidir seu voto às vésperas, quando não no próprio dia da eleição, principalmente para cargos como governador, prefeito, senador, deputado e vereador”, afirma Raphael Nishimura, membro da Associação Americana para Pesquisa de Opinião Pública (AAPOR) e diretor de amostragem na Universidade de Michigan.
O que é uma pesquisa quantitativa?
No período eleitoral, o mais comum é se deparar com as pesquisas quantitativas, que têm como principal objetivo quantificar informações - isto é, apontar, em números, qual a situação do pleito naquele determinado momento. Essas pesquisas apresentam dados como a intenção de voto para cada candidato e os índices de rejeição deles, entre outros temas, oferecendo um panorama numérico da corrida eleitoral.
As pesquisas quantitativas são realizadas por meio de questionários aplicados a um grupo de pessoas que deve representar uma determinada população ou eleitorado. As amostras, como são chamadas, levam em consideração características como idade, gênero, renda, escolaridade e localização.
O tamanho da amostra, segundo Raphael , depende de alguns fatores, entre eles, a precisão desejada - geralmente, busca-se atingir uma margem de erro entre um e cinco pontos porcentuais, com 95% de confiança.
“O tamanho da amostra também está relacionado à forma como ela é selecionada. Em pesquisas eleitorais, isso pode ocorrer de duas maneiras, principalmente: os respondentes podem ser selecionados de forma aleatória, como em pesquisas telefônicas e online, ou através de múltiplos estágios de seleção, onde são escolhidos grupos de domicílios ou pessoas, um método mais comum em pesquisas presenciais e domiciliares”, explica Nishimura.
A pesquisa ser presencial ou telefônica faz diferença no resultado?
As pesquisas quantitativas podem ser realizadas presencialmente (conhecidas popularmente como “face a face”), por telefone ou online. Cada um desses métodos possui variações, o que explica, em partes, as diferenças nos resultados entre os institutos de pesquisa e o fato de suas pesquisas não serem diretamente comparáveis. Não existe um método certo ou errado, e cada um possui suas próprias vantagens e desvantagens, diz Sergio Simoni Jr, professor do Departamento de Ciência Política da Universidade de São Paulo (USP):
“Nas entrevistas presenciais, a vantagem é que é mais factível alcançar diferentes estratos da sociedade e chegar a um perfil mais representativo da população. No entanto, o processo é mais caro e mais demorado, pois exige a mobilização de entrevistadores, e há o risco de o entrevistado se sentir constrangido em dar certas respostas na presença do pesquisador, o que pode levar a opiniões menos sinceras em questões delicadas”, explica Simoni Jr, que também é pesquisador do Centro de Estudos e Opinião Pública (Cesop).
Segundo o professor, uma estratégia para captar opiniões sinceras, mesmo em temas sensíveis, é dar uma lista de afirmações e pedir ao entrevistado que indique quantos itens ele concorda ou já praticou, sem precisar especificar quais. Para metade dos respondentes, a lista contém um certo número de itens; para a outra metade, um item sensível é adicionado à lista. Ao comparar a média de concordância entre os grupos, dá para perceber se as pessoas podem estar mentindo.
Nas entrevistas remotas, diz o especialista, é mais difícil garantir que o entrevistado esteja realmente prestando atenção. Além disso, a população de baixa renda tem menor acesso à internet e menos habilidade para responder online, o que pode comprometer a representatividade da pesquisa.
“Quando o instituto não consegue atingir o percentual adequado de pessoas de um determinado estrato, utiliza-se a ponderação das respostas. Por exemplo, se há menos entrevistados de baixa renda do que o estimado na população, atribui-se um peso maior a essas respostas para equilibrar a proporção real”, afirma o pesquisador.
Como funcionam as pesquisas qualitativas?
Embora as pesquisas quantitativas ocupem os noticiários e sejam mais conhecidas pela população, são as pesquisas qualitativas que estão presentes no cotidiano das campanhas. Nas eleições, as qualis são usadas pelas campanhas para entender mais profundamente a opinião dos eleitores sobre diversos temas, ajudando a identificar os fatores que influenciam na escolha do voto e a compreender a percepção sobre cada candidato.
“As pesquisas qualitativas funcionam como um detector de desejos, frustrações e expectativas do eleitor comum. Sua dinâmica é um bate-papo e troca de ideias, seguindo um roteiro formulado com base em objetivos específicos. Essas sessões geralmente ocorrem em um ambiente sóbrio e duram entre 1h30 e 2h”, explica Renato Dorgan, CEO do Instituto Travessia, especialista em pesquisas qualitativas e quantitativas.
As qualis não possuem a mesma precisão metodológica que as quantitativas em relação à amostra, pois não têm o objetivo de representar todo o universo do eleitorado. Elas são realizadas com grupos específicos, de oito a dez pessoas, que, embora não tenham valor estatístico, simbolizam os sentimentos de determinado segmento. “A definição do perfil do grupo é algo essencial, seja por classe, idade, aprovação de determinada gestão, intenção de voto a determinado candidato ou um cruzamento de vários destes elementos”, afirma Dorgan.
Segundo o especialista, a pesquisa qualitativa é fundamental em dois momentos ao longo do ano eleitoral. No primeiro quadrimestre, é comum que as campanhas realizem uma “quali ambiental” para avaliar a percepção dos eleitores sobre a cidade, os serviços públicos, a aprovação e desaprovação do prefeito, o posicionamento dos principais pré-candidatos, além de identificar quais discursos de construção e desconstrução ressoam melhor naquele pleito.
“No segundo momento do ano eleitoral, entre junho e agosto, a quali é utilizada para definir os primeiros vídeos de campanha, a marca, o slogan, as principais estratégias de desconstrução dos adversários, como tirar votos do oponente, conquistar indecisos e estabelecer qual será a narrativa principal das eleições.”
Uma campanha pode utilizar uma pesquisa qualitativa, por exemplo, para avaliar a reação de um grupo específico de eleitores a uma peça publicitária ou a um discurso do candidato.
Como o Estadão vai tratar as pesquisas nas eleições de 2024?
O Estadão entende o resultado das pesquisas como um elemento relevante da corrida eleitoral, mas que não pode ser visto de forma isolada. Por isso, o jornal noticia os resultados dos principais institutos, mas não os levará para a manchete de suas diferentes plataformas. O que receberá estes espaços de maior destaque são análises das tendências indicadas por um conjunto de pesquisas ou de movimentos das campanhas que tiveram como um dos seus indutores os resultados de pesquisas. Como forma adicional de auxiliar as suas audiências a ler os resultados, o Estadão passará a linkar este guia em todas as suas matérias sobre pesquisa. A exemplo de 2022, o Estadão optou por não contratar pesquisas próprias nas eleições de 2024.