Análise | Nova IA da Meta é divertida de usar, mas não é confiável; veja teste

Apesar da esperança de Mark Zuckerberg de que o chatbot seja o mais inteligente, ele tem dificuldades com fatos, números e pesquisa na web

PUBLICIDADE

Por Brian X. Chen (The New York Times )

Nos últimos dias, usuários nos EUA devem ter notado algo novo nos aplicativos do Meta, incluindo Instagram, Messenger e WhatsApp: um chatbot com inteligência artificial (IA).

Nesses aplicativos, você pode conversar com o Meta AI e digitar perguntas e solicitações como “Como está o tempo esta semana em Nova York?” ou “Escreva um poema sobre dois cachorros que vivem em São Francisco”. O assistente apresentará respostas imediatamente, como “O corgi era baixo, com um rabo tão largo, o labrador era alto, com uma língua que deslizava”. Você também pode instruir a Meta AI a produzir imagens, como uma ilustração de uma família assistindo a fogos de artifício.

Meta introduz assistente de IA em aplicativos como Instagram e WhatsApp para responder a perguntas e solicitações dos usuários Foto: Derek Abella/The New York Times

PUBLICIDADE

Essa é a resposta da companhia de Zuckerberg ao ChatGPT da OpenAI, o chatbot que revolucionou o setor de tecnologia em 2022, e a bots semelhantes, incluindo o Gemini,do Google, e o Bing AI da Microsoft. O gerador de imagens do Meta bot também concorre com ferramentas de imagem de IA como o Firefly, Midjourney e DALL-E.

Diferentemente de outros chatbots e geradores de imagens, o assistente de IA da Meta é uma ferramenta gratuita incorporada a aplicativos que bilhões de pessoas usam todos os dias, o que o torna a iniciativa mais agressiva de uma grande empresa de tecnologia para levar IA generativa para o mercado convencional.

“Acreditamos que o Meta AI é agora o assistente de IA mais inteligente que você pode usar gratuitamente”, escreveu Mark Zuckerberg, CEO da empresa, no Instagram na quinta-feira, 25.

Publicidade

O novo bot convida você a “perguntar qualquer coisa ao Meta AI” - mas meu conselho, depois de testá-lo por seis dias, é abordá-lo com cautela. Ele comete muitos erros quando você o trata como um mecanismo de pesquisa. Por enquanto, você pode se divertir um pouco: Seu gerador de imagens pode ser uma maneira inteligente de se expressar ao conversar com amigos.

Uma porta-voz da Meta disse que, como a tecnologia é nova, talvez nem sempre retorne respostas precisas, como acontece com outros sistemas de inteligência artificial. No momento, não há como desativar o Meta AI dentro dos aplicativos.

Veja a seguir o que não funciona bem - e o que funciona - na IA do Meta.

Não é um mecanismo de busca

A Meta anunciou seu chatbot como um substituto para a pesquisa na web. Ao digitar na barra de pesquisa na parte superior do Messenger ou do Instagram, um grupo de amigos planejando uma viagem poderia procurar voos enquanto conversava, disse a empresa.

Vou ser direto: não faça isso. O Meta AI falha espetacularmente em consultas básicas de pesquisa, como procurar receitas, passagens aéreas e atividades de fim de semana.

Publicidade

Em resposta à minha solicitação para pesquisar voos de Nova York para o Colorado, o chatbot listou instruções sobre como pegar o transporte público do aeroporto de Denver para o centro da cidade. E quando solicitei voos de Oakland, Califórnia, para Puerto Vallarta, no México, o bot listou os voos que partiam de Seattle, São Francisco e Los Angeles.

Quando pedi ao Meta AI que procurasse uma receita para fazer pão de leite japonês, o bot produziu uma receita genérica de pão que pulava a etapa mais importante: tangzhong, a técnica que envolve cozinhar farinha e leite até formar uma pasta.

A IA também inventou outras informações básicas. Quando lhe pedi sugestões para um fim de semana romântico em Oakland, sua lista incluía uma empresa fictícia. E quando pedi que ela me falasse sobre mim - Brian Chen, o jornalista - ela disse que eu trabalhava no The New York Times, mas mencionou incorretamente um site de tecnologia para o qual eu nunca escrevi, o The Verge.

Nova funcionalidade nos aplicativos do Meta permite interações com um chatbot de IA para obter respostas instantâneas e até mesmo criar conteúdo visual Foto: Brian X. Chen/The New York Times

O Bing AI e o Gemini, que são conectados diretamente aos mecanismos de pesquisa da Microsoft e do Google, se saíram melhor nesses tipos de tarefas de pesquisa, mas clicar em um link por meio de uma pesquisa antiga na Web ainda é mais eficiente.

Não peça para ele contar

Os chatbots de IA funcionam procurando padrões em como as palavras são usadas juntas, semelhante aos sistemas de texto preditivo em nossos telefones que sugerem palavras para completar uma frase. Todos eles tiveram dificuldades com números.

Publicidade

Não é de surpreender que o assistente da Meta seja péssimo em contagem. Quando você pede a ele uma palavra de cinco sílabas que comece com a letra w, ele responde com “wonderfully”, que tem quatro sílabas. Quando você pedir uma palavra de quatro sílabas que comece com w, ele oferecerá “wonderful”, que tem três sílabas. O Gemini e o ChatGPT também falham nesses testes.

Foco em palavras

Como outros chatbots, o Meta AI apresentava um desempenho melhor ao receber mais informações do usuário.

Ele se destacou na edição de parágrafos existentes. Por exemplo, quando eu forneci ao Meta AI parágrafos que pareciam verborrágicos e pedi que o parágrafo fosse mais conciso, o chatbot cortou todas as palavras desnecessárias. Quando eu pedia para melhorar uma frase escrita em voz passiva, o bot a reescrevia em voz ativa e acrescentava mais contexto. Quando pedi que ele removesse o jargão de um parágrafo escrito por um blog de tecnologia, ele reescreveu termos altamente técnicos em linguagem simples.

É um ótimo guia de estudo

Como o Meta AI é melhor quando trabalha com texto existente, ela pode ser útil para estudar. Por exemplo, se você estiver fazendo uma aula de história e estudando a Segunda Guerra Mundial, poderá colar um site com informações sobre a guerra na barra de pesquisa e pedir ao bot para fazer um teste. O chatbot lerá as informações do site e gerará um teste de múltipla escolha.

Você pode usá-lo para emojis divertidos

O aspecto mais atraente do Meta AI é sua capacidade de gerar imagens digitando “/imagine” seguido de uma descrição da imagem desejada. Por exemplo, “/imagine a fotografia de um gato dormindo no parapeito de uma janela” produzirá uma imagem convincente em poucos segundos:

Publicidade

Meta AI gerou a imagem de um carrinho de bebê com rodas gigantes Foto: Brian X. Chen/The New York Times

A IA da Meta é muito mais rápida do que outros geradores de imagens, como o Midjourney, que pode levar mais de um minuto. Os resultados podem ser muito estranhos: ocasionalmente, as imagens de pessoas não têm membros ou parecem vesgas.

Especialistas em ética levantaram preocupações sobre as implicações da geração de imagens falsas, pois elas podem contribuir para a disseminação de informações errôneas online. Mas, no contexto do uso da inteligência artificial durante o bate-papo com amigos e familiares no WhatsApp e no Messenger, o Meta AI é um exemplo positivo de como a geração de imagens falsas pode ser divertida - e segura - se a tratarmos como uma nova forma de emoji.

Em uma conversa em grupo com meus sogros, mencionei que estava comprando um carrinho de bebê robusto que pudesse suportar as ruas tortuosas do meu bairro. Em segundos, minha esposa usou o Meta AI para gerar uma imagem de um carrinho de bebê com rodas enormes que o faziam parecer um caminhão monstro, estampado com uma etiqueta útil que dizia: “Imaginado com AI”.

Este conteúdo foi traduzido com o auxílio de ferramentas de Inteligência Artificial e revisado por nossa equipe editorial. Saiba mais em nossa Política de IA.

Análise por Brian X. Chen
Comentários

Os comentários são exclusivos para assinantes do Estadão.