Temos um novo chatbot no escritório. Este é Meta.aio assistente que a empresa de Mark Zuckerberg lançou em setembro de 2023 e que agora está ganhando por dois motivos.
O primeiro, porque se baseia no novo modelo fundacional, Llama 3. E o segundo, porque podemos utilizá-lo na web: não dependemos mais de sua integração em aplicativos como WhatsApp, Instagram, Facebook ou Messenger.
Era exatamente isso que queríamos fazer na Xataka, e depois dessas primeiras horas de uso Já temos algumas impressões sobre o que ele pode dar de si mesmo. A surpresa não é que ele se comporte bem – o que acontece – mas que seu verdadeiro potencial não está exatamente na web: isso é apenas o “doce” da Meta para poder competir com o resto de seus rivais em seu terreno. Sua vantagem é outra.
Como testar o chatbot Meta.ai
Teoricamente, Meta.ai só pode ser usado se estivermos nos Estados Unidos ou em um dos 13 países adicionais incluídos no lançamento inicial, a saber: Austrália, Canadá, Gana, Jamaica, Malawi, Nova Zelândia, Nigéria, Paquistão , Singapura, África do Sul, Uganda, Zâmbia e Zimbabué.
Além disso, o chatbot pode ser usado apenas em inglês. Meta indica que em breve estará disponível em outros idiomas e regiões, mas por enquanto essas são as limitações geográficas e linguísticas impostas pelo serviço.
A limitação geográfica pode ser facilmente superado com uma VPN. É um método que já funcionou para nós em outras ocasiões para testar chatbots que também foram lançados inicialmente em países como os EUA, e isso vale novamente nesta ocasião: ao conectar-se à VPN, basta escolher um nó em um dos países onde o chatbot está disponível e pronto.
Usamos uma conexão que fingia que estávamos em Atlanta, após o qual apareceu uma landing page que nos incentivou a usar alguns dos exemplos de uso do chatbot, e também nos incentivou a perguntar qualquer coisa à IA do Meta.
Um chatbot difícil de diferenciar de seus rivais
Na barra lateral esquerda temos um histórico de conversas e, sobretudo, uma opção de login no Facebook, algo essencial para poder acessar outra das opções interessantes desta plataforma: gerar imagens por IA.
Inicialmente nos concentramos em fazer algumas perguntas para avaliar suas respostas. Depois de verificar que Meta.ai não fala espanhol —o chatbot pediu desculpas e garantiu que teria esse apoio no futuro—perguntámos todo o tipo de coisas.
Começamos com algumas notícias esportivas para saber o quão atualizado estava o chatbot. Ele respondeu corretamente quando questionado sobre quais seriam os próximos jogos da Liga dos Campeões, enquanto quando questionado sobre quem era o favorito para vencer, deu respostas baseadas em um site de apostas, uma decisão curiosa, mas certamente razoável.
Também queríamos saber se ele tinha algum tipo de informação sobre Xataka. Mais uma vez, ele respondeu com rapidez e precisão. A descrição foi precisa e ainda acrescentou um fato sobre o qual outros chatbots se enganaram no passado, no ano em que foi fundado, 2004.
Para adicionar perguntas mais informativas – e novamente esportivas –, perguntamos ao Meta.ai algo que já perguntamos a outros chatbots que avaliamos no passado: criar uma tabela com os países que conquistaram mais campeonatos e segundos lugares no passado. futebol mundial.
Aqui está o assistente Meta Ele fez algo ótimo que nem pedimos.: somados os anos em que esses países venceram os campeonatos que venceram. Ele não incluiu outra coluna com os anos dos vice-campeões e, quando perguntamos primeiro, ele a criou separada da primeira.
Porém, depois de pedir para ele uni-los, ele fez essa fusão para criar uma tabela quase perfeita: havia dados errados, como o vice-campeonato da França em 1986, que não ocorreu naquele ano, mas em 2006. Depois ele conseguiu novamente na última Copa do Mundo no Catar em 2022, mas esses dados indicaram bem.
Também queríamos pedir ao Meta.ai para resolver alguns pequenos problemas matemáticos. Na primeira ele falhou: perguntamos-lhe o seguinte (traduzido para o inglês): “A soma das idades de três adultos é 60 anos. O mais velho deles é 6 anos mais velho que o mais novo. Qual é a idade de cada um deles? Suponha que um adulto tem pelo menos 18 anos.” Ele respondeu 18,24,24, o que não estava correto.
Tanto o ChatGPT quanto o Claude 3 (em suas versões gratuitas na web) responderam corretamente ao problema. A solução é 18,18,24, e depois de dizer ao Meta.ai que havia cometido um erro, ele tentou novamente, mas errou novamente e disse que a solução era 12,30,18. Apontando novamente seu erro, ele pediu a solução para entender o que estava fazendo de errado. Um detalhe curioso que mostra mais uma vez que estes chatbots podem estar certos (ou errados) mas sem saber como o fazem.
Meta.ai respondeu corretamente a outros pequenos problemas matemáticos e também queríamos fazer outras perguntas, como como instalar um SSD em um Mac mini. Ele respondeu corretamente, embora um tanto impreciso em alguns pontos.
Por exemplo, ao indicar “Certifique-se de que o SSD é compatível com o modelo do seu Mac mini”, não especificou mais, mas ao focar nessa seção nos ajudou por ser mais específico porque precisava de mais informações. Um detalhe curioso foi a inclusão das ferramentas necessárias, e aqui quando questionado sobre as fontes – que não apareceram inicialmente – ele indicou que seus dados vieram do site de suporte da Apple – provavelmente a melhor fonte possível, um ponto a favor do Meta .ai. —, dos quais oferecia até cinco links diferentes.
Esses testes demonstraram um comportamento que parece comparável ao oferecido por outros chatbots no mercado. As respostas são geradas muito rapidamente – mais rápido que o ChatGPT 3.5, a par do Claude 3, por exemplo – e a sua correcção e precisão são notáveis, embora como sempre seja possível ao chatbot cometer erros ou mesmo inventar dados.
Para finalizar, queríamos testar seu toque criativo e ver como ele se combinava com outro modelo de IA que tem sido especialmente marcante nos últimos dias. Queríamos criar uma música com Suno.ai e ter a letra composta por Meta.ai. O tema, um pequeno aceno para aquela guerra entre abas e espaços que os programadores travam há décadas.
O resultado, que você pode apreciar naquele vídeo, é certamente aparente e mostra que esse tipo de sistema pode acabar dando resultados surpreendentes. A coisa não parou por aí e na Xataka queríamos testar mais um elemento deste chatbot. Um mais criativo.
Gerando imagens com Meta.ai
Como mencionamos, outra das opções interessantes deste chatbot é que ele também oferece a possibilidade de gerar imagens, algo que alguns de seus rivais também permitem há algum tempo. A opção exige que façamos login no Meta (ou criemos uma conta), após o qual podemos criar imagens com um “Imagine…” – o mesmo comando de Midjourney – embora possamos usar outras fórmulas como “Gerar uma imagem ” ou “mostrar um…”.
Também realizamos alguns exames de imagem. O motor incorporado neste chatbot é certamente decente, embora tenha um filtro particularmente notável que o torna muitas imagens não são geradas. Mes