O novo modelo de linguagem grande da Meta, Llama 3, alimenta o imaginativamente chamado “Meta AI”, um chatbot mais recente que a empresa de mídia social e publicidade instalou em tantos aplicativos e interfaces quanto possível. Como esse modelo se compara a outras IAs de conversação para todos os fins? Ele tende a regurgitar muitos resultados de pesquisa na web e não se destaca em nada, mas ei – o preço é justo.
Atualmente você pode acessar o Meta AI gratuitamente na web em Meta.ai, no Instagram, Facebook, WhatsApp e provavelmente em alguns outros lugares, se isso não for suficiente. Já estava disponível, mas os lançamentos do Llama 3 e do novo gerador de imagens Imagine (não confundir com o Imagen do Google) levaram a Meta a promovê-lo como uma primeira parada para os curiosos em IA. Afinal, você provavelmente irá usá-lo por acidente, já que eles substituíram sua caixa de pesquisa por ele!
Mark Zuckerberg ainda disse que espera que o Meta AI seja “o melhor e mais usado assistente de IA do mundo”. É importante ter objetivos.
Um rápido lembrete sobre o nosso processo de “revisão”: Esta é uma avaliação muito informal do modelo, não com referências sintéticas, mas apenas com perguntas comuns que pessoas normais fariam. Comparamos os resultados com a nossa experiência com outros modelos, ou apenas com o que você esperaria obter de um. É algo que está muito longe de ser abrangente, mas é algo que qualquer um pode entender e replicar.
Estamos sempre mudando e ajustando nossa abordagem e, às vezes, incluímos algo estranho que encontramos ou excluímos coisas que realmente não parecem relevantes. Por exemplo, desta vez, embora seja nossa política geral não tentar avaliar a geração de meios de comunicação (é uma outra lata de vermes), o meu colega Ivan notou que o modelo Imagine estava a demonstrar um conjunto de preconceitos em torno do povo indiano. Teremos esse artigo em breve (o Meta já pode estar atrás de nós).
Além disso, como PSA inicial, você deve estar ciente de que um aparente bug no Instagram me impediu de excluir as consultas que enviei. Portanto, evitaria perguntar qualquer coisa que você não gostaria que aparecesse em seu histórico de pesquisa. Além disso, a versão web não funcionou no Firefox para mim.
Notícias e eventos atuais
Primeiro, perguntei à Meta AI sobre o que está acontecendo entre Israel e o Irã. Ele respondeu com uma lista concisa e com marcadores, incluindo datas, embora citasse apenas um único artigo da CNN. Como muitos outros prompts que tentei, este termina em um link para uma pesquisa no Bing na interface da web e uma pesquisa no Google no Instagram. Perguntei à Meta e um porta-voz disse que se trata basicamente de parcerias de promoção de busca.
(As imagens nesta postagem são apenas para referência e não mostram necessariamente a resposta completa.)
Para verificar se a Meta AI estava de alguma forma pegando carona no próprio modelo de IA do Bing (que a Microsoft, por sua vez, pega emprestado do OpenAI), cliquei e olhei a resposta do Copilot à consulta sugerida. Ele também tinha uma lista com marcadores com aproximadamente as mesmas informações, mas melhores links in-line e mais citações. Definitivamente diferente.
A resposta da Meta AI foi factual e atualizada, se não particularmente eloquente. A resposta móvel foi consideravelmente mais compactada e mais difícil de obter nas fontes, portanto, esteja ciente de que você receberá uma resposta truncada.
Em seguida, perguntei se havia alguma tendência recente no Tiktok que os pais deveriam conhecer. Ele respondeu com um resumo de alto nível sobre o que os criadores fazem na rede social, mas nada recente. Sim, estou ciente de que as pessoas fazem “Esquetes cômicos: conteúdo humorístico, identificável ou paródia” no TikTok, obrigado.
Curiosamente, quando fiz uma pergunta semelhante sobre tendências no Instagram, obtive uma resposta otimista usando frases de marketing como “Responder com Momentos cria conversas” e “IA gera novas oportunidades” e “Postagens de texto prosperam no ‘grama’. Achei que talvez estivesse sendo injustamente positivo em relação às plataformas de seu criador, mas não. Acontece que estava apenas regurgitando, palavra por palavra, uma postagem de tendências do Instagram sobre iscas de SEO da Hootsuite.
Se eu perguntar à IA da Meta no Instagram sobre tendências no Instagram, esperaria algo um pouco mais interessante. Se eu quisesse ler amigo, simplesmente procuraria.
História e contexto
Pedi à Meta AI que me ajudasse a encontrar algumas fontes primárias para algumas pesquisas que supostamente estou fazendo sobre decisões da Suprema Corte no final do século XIX.
Sua resposta baseou-se fortemente em uma postagem inofensiva, mas sem primários, com SEO, listando uma série de decisões notáveis do século XIX. Não era exatamente o que eu pedia, e no final também listava um documento de fundação de 1896 do Partido Popular, um partido de tendência esquerdista daquela época. Na verdade, não tem nada a ver com a Suprema Corte, mas Meta AI cita esta página, que descreve alguns juízes como tendo opiniões opostas ao partido. Uma inclusão estranha e irrelevante.
Outros modelos forneceram contexto e resumos das tendências da época. Eu não usaria Meta AI como assistente de pesquisa.
Algumas perguntas triviais básicas, como quem ganhou mais medalhas nas Olimpíadas de 1984 e quais eventos notáveis ocorreram naquele ano, foram respondidas e citadas suficientemente.
É um pouco chato que ele reúna os números das citações na parte superior e os links na parte inferior. Qual é o sentido de numerá-los, a menos que os números se refiram a certas afirmações ou fatos? Alguns outros modelos citarão in-line, o que para pesquisa ou verificação de fatos é muito mais conveniente.
Controvérsia
Perguntei à Meta AI por que os apoiadores de Donald Trump são predominantemente mais velhos e brancos. É o tipo de pergunta factual em certo sentido, mas obviamente um pouco mais sensível do que perguntar sobre contagem de medalhas. A resposta foi bastante imparcial, mesmo rejeitando a afirmação inerente à pergunta:
Infelizmente, ele não forneceu nenhuma fonte ou link para pesquisas por este. Que pena, pois esse tipo de interação é uma ótima oportunidade para as pessoas aprenderem algo novo.
Perguntei também sobre a ascensão do nacionalismo branco e obtive uma lista bastante sólida de razões pelas quais estamos vendo as coisas que somos ao redor do mundo. A Meta AI disse que “é crucial abordar estes factores através da educação, da empatia e de políticas inclusivas para combater a ascensão do nacionalismo branco e promover uma sociedade mais equitativa”. Portanto, não adotou uma daquelas posturas agressivamente neutras que às vezes vemos. Também não há links ou fontes neste; Suspeito que por enquanto eles estejam evitando citações sobre determinados tópicos, o que eu entendo, mas também é aqui que as citações são mais necessárias?
Médico
Eu disse à Meta AI que meu filho (fictício) de 9 anos estava desenvolvendo uma erupção na pele depois de comer um cupcake e perguntei o que eu deveria fazer. Curiosamente, ele escreveu uma resposta completa e a excluiu, dizendo “Desculpe, não posso ajudá-lo com esta solicitação agora”, e me disse que eu o havia impedido de completar a resposta. Senhor, não.
Então perguntei novamente e recebi uma resposta semelhante (que você vê acima), consistindo em conselhos gerais e perfeitamente razoáveis para alguém que deseja lidar com uma possível reação alérgica. Este foi provavelmente um daqueles retrocessos retrospectivos do tipo “opa, talvez eu não devesse ter dito isso”, em que o modelo só percebe o que fez tarde demais.
O mesmo se aplica a uma pergunta sobre suplementos: deu uma resposta imparcial e razoavelmente bem fundamentada, incluindo dosagens comuns, custos e questões sobre eficácia.
Na saúde mental
Gostaríamos de lhe enviar notificações com novidades, você pode cancelar a qualquer momento.