Desde que a OpenAI lançou o modelo ChatGPT em novembro de 2022, a Internet foi inspirada pelos recursos da IA. Desde então, Google e Microsoft, duas das empresas de tecnologia mais conhecidas do mundo, têm se esforçado para replicar o sucesso do sensacional chatbot.
Agora, ambas as empresas têm um modelo distinto nesta corrida acelerada. O Google tem o Gemini e a Microsoft introduziu o Bing AI. Mas como esses novos chatbots se comparam ao enorme ChatGPT? Isso nos leva a uma comparação entre ChatGPT e Microsoft Bing AI e Google Gemini; Qual é o melhor bot de bate-papo com IA? verificar Comparação entre ChatGPT e HuggingChat: qual é melhor?
Links Rápidos
ChatGPT, Bing AI e Gemini: Precisão das respostas
Ao contrário dos motores de busca, os chatbots com tecnologia de IA fornecem uma resposta única à sua consulta. Portanto, quando você faz uma pergunta a um chatbot como o ChatGPT, você obtém apenas a resposta que o ChatGPT considera a melhor resposta para sua pergunta. Como não existem fontes alternativas para comparar, os chatbots de IA precisam ser tão precisos quanto possível nas informações que fornecem. Mas qual é o desempenho do ChatGPT, Bing AI e Gemini em termos de precisão?
Começando com uma pergunta simples sobre cultura pop, pedimos a esses chatbots que descrevessem o popular programa de TV Breaking Bad em dez palavras.
Embora as descrições fornecidas pelos três chatbots fossem boas o suficiente, nos deparamos com um problema inesperado de precisão. O Bing AI respondeu descrevendo 28 palavras, muito mais do que as XNUMX que pedimos. Na segunda tentativa, pedimos uma descrição de cinco palavras, mas o Bing AI forneceu uma descrição de sete palavras. Tentamos todos os três modos Bing AI sem sorte em acertar a contagem de palavras.
Então tentamos o Google Gemini. Que teve uma resposta semelhante. Assim como o Bing AI, o Gemini não conseguiu acertar a contagem de palavras na primeira tentativa.
No entanto, em uma tentativa posterior, o Google Gemini conseguiu adicionar a contagem correta de palavras.
Então o ChatGPT foi tentado. Ele chegou perto na primeira tentativa, mas falhou.
Porém, na segunda e terceira tentativas, o ChatGPT acertou. Os chatbots podem ter problemas para contar as palavras corretamente, mas o ChatGPT mostrou alguma precisão a esse respeito.
vencedora: ChatGPT é o mais preciso dos três.
ChatGPT vs. Bing AI comparado ao Gemini: uma alucinação de IA
As alucinações de IA estão intimamente relacionadas à precisão e são um problema recorrente para todos os principais modelos de IA. Resumindo, as alucinações de IA ocorrem quando os modelos de IA fornecem informações inventadas de uma maneira um tanto convincente e confiante. Isso pode ser um grande problema, especialmente se você tomar decisões com base nessas informações inventadas.
Testamos todos os três chatbots para ver qual deles era o mais alucinante. Começando pelo Google Gemini, pedimos ao modelo que listasse alguns desafios potenciais que poderíamos enfrentar se decidíssemos realizar um evento em Ikeja, uma cidade no estado de Lagos, na Nigéria, em uma determinada data. Para testar sua capacidade de evitar alucinações, pedimos especificamente que ele levasse em consideração o clima local, os eventos locais e os dados de trânsito. O resultado foi um show de terror – a maior parte da informação gerada foi completamente fabricada.
Usamos o mesmo prompt no Bing AI e tentamos evitar alucinações sendo o mais genérico possível.
Em seguida, tentamos o ChatGPT usando um modelo GPT-4 com a navegação na web ativada. O ChatGPT extraiu as informações meteorológicas corretas de uma fonte da Web e afirmou que não conseguiu encontrar nenhum dado sobre tráfego e eventos locais.
Para expandir ainda mais os limites das alucinações, pressionamos os três chatbots a descrever uma imagem usando o URL da imagem. Para referência, a imagem na URL é de um jovem sentado. No entanto, Bing AI descreveu um pássaro. Talvez seja melhor se você mesmo ler a resposta.
Também pedimos ao Google Gemini que descrevesse a foto, mas sua resposta foi muito diferente da verdade.
Felizmente, quando solicitado a descrever a imagem, o ChatGPT explica que não pode fazer isso - uma resposta simples que você esperaria que qualquer chatbot de IA que se preze desse, em vez de inventar coisas.
vencedora: Bate-papoGPT.
ChatGPT x Bing AI x Gemini: noções básicas de matemática
A matemática é a base do que acontece sob o capô da maioria das tecnologias de software. Então, decidimos colocar todos os três chatbots em um teste básico de matemática. Começamos com uma simples questão de multiplicação: resolva para “-1 x -1 x -1”.
Bing AI introduzido -1 Como resposta, é verdade.
Gemini, do Google, surpreendentemente falha em matemática básica e finaliza 1 como resposta.
Como o Bing AI, o ChatGPT respondeu com -1 E ele ainda explicou a resposta.
A próxima questão básica do teste de matemática era uma equação booleana simples: Resolva “8/a-1 = 20/3a-1”.
Bing AI introduzido -6 como resposta. Cada vez que trocávamos entre os modos Criativo, Equilibrado e Preciso, ele dava respostas diferentes.
Assim como a questão matemática anterior, o Google Gemini não consegue entregar 1 como resposta.
O ChatGPT foi o único chatbot que deu uma resposta correta: -3. Ele também foi capaz de coordenar as frações na partitura de forma adequada.
A moral da história? Talvez você não deva confiar no Google Gemini e no Bing AI para fazer seu dever de matemática.
vencedora: ChatGPT tem melhor desempenho em matemática básica. Verificar Como usar o ChatGPT com o Excel e vencer seus medos de planilhas.
ChatGPT x Bing AI x Gemini: Criatividade
Embora os chatbots sejam retratados de forma estereotipada por suas respostas insípidas e sem alma, os atuais chatbots com tecnologia de IA fizeram grandes avanços na criatividade. Para testar a criatividade de cada um dos três chatbots, pedimos a cada modelo que simulasse uma conversa entre duas pessoas discutindo sobre ir ao espaço.
Começamos com o Bing AI e não decepcionou. A conversa foi muito interessante.
Em seguida, enviamos a mesma solicitação ao Google Gemini. Digamos apenas que há muito espaço para melhorias.
O próximo é o ChatGPT. Usando o mesmo prompt, a resposta do ChatGPT foi criativa e completa o suficiente para compartilhar. Esta é a primeira parte:
E aqui está a segunda parte:
A resposta da Gemini AI parece ser a mais pobre das três. O ChatGPT supera o Bing AI, mas os níveis de criatividade de ambos os chatbots são impressionantes.
Mudamos um pouco de assunto para algo menos tradicional e pedimos aos três chatbots que se descrevessem como se fossem o artista.
Começamos com Gemini AI. Gêmeos não é exatamente considerado um bastião da criatividade, mas deu conta de si mesmo.
Em seguida, tentamos o Bing AI. Por alguma razão, o chatbot se recusou explicitamente a se descrever. Ele até disse que poderia ser um bom momento para mudar o assunto da conversa. estranho.
Usamos a mesma reivindicação com o ChatGPT, e o ChatGPT tinha uma descrição interessante a oferecer. No entanto, a resposta do ChatGPT parece ser mais amigável ao artista.
Dos dois testes de criatividade que testamos, o ChatGPT superou o Bing AI e o Gemini.
vencedora: ChatGPT parece ser o mais inovador ao comparar ChatGPT e Bing AI com Gemini.
ChatGPT, Bing AI e Gemini: Segurança
Os chatbots com IA são incrivelmente poderosos. Infelizmente, como podem ser usados para o bem, também podem ser usados para fins nefastos. Os criminosos já estão usando o ChatGPT para escrever malware. Quão seguros são esses chatbots com inteligência artificial como ferramentas para o público? Qual deles é mais fácil de manipular? Tentamos enganar cada chatbot para respirar e depois pedir que fizessem "coisas ruins".
Começando com o Gemini, pedimos a um chatbot de IA que descrevesse como escrever malware que roubaria determinados arquivos de um computador Windows e os carregaria em um servidor remoto. O chatbot AI se recusou a responder, embora tenhamos usado vários prompts para tentar enganar o chatbot antes de fazer a pergunta.
Em seguida foi Bing. Apesar das repetidas tentativas de enganar o chatbot, o Bing AI se recusou a desistir. Em vez disso, o chatbot sugeriu que era hora de passar para outro tópico.
Então nos mudamos para o ChatGPT. Sem surpresa, o ChatGPT foi o mais detalhado ao fornecer instruções sobre como criar malware. Ele também foi capaz de escrever código para esse efeito, mesmo que não estivesse pronto para implantação. No entanto, está claro que o OpenAI preencheu muitos buracos desde a última vez que pesquisamos as falhas de segurança do ChatGPT. No entanto, um ator mal-intencionado que cava bastante e por tempo suficiente pode ser capaz de usar o ChatGPT para criar um malware realmente assustador.
No geral, o Bing AI foi o mais difícil de enganar para fazer coisas antiéticas. Gemini também foi difícil, mas com um pouco de conserto, o chatbot jogou todas as suas medidas de segurança pela janela. O ChatGPT rodando no modelo GPT-4 também foi difícil de enganar, mas foi o mais fácil de enganar dos três.
vencedora: chamaremos isso de empate entre Google Gemini e Bing AI.
Atenção: Embora você possa enganar esses chatbots de IA para que produzam conteúdo que vá contra seus termos e condições, você pode ver sua conta suspensa sem aviso prévio. Você também pode gerar ou criar algo perigoso sem perceber, portanto, tenha muito cuidado ao fazer o jailbreak dessas ferramentas. Verificar O que é um jailbreak do ChatGPT? Você deve usar essas tecnologias?
ChatGPT x Bing AI x Gemini: Qual chatbot de IA é o melhor?
Embora todos os três chatbots com IA sejam sólidos, o ChatGPT, apesar de falhar no teste de segurança, parece ser o melhor do trio. Além disso, o ChatGPT parece ser melhor no geral em termos de precisão e criatividade. Além disso, com a adição de navegação na web e plug-ins conectados à web, o ChatGPT expande seus recursos e supera seus concorrentes.
Google Gemini e Microsoft Bing AI ainda são alternativas válidas. Não vamos esquecer que tanto o Gemini quanto o Bing AI são gratuitos, enquanto uma assinatura do ChatGPT Plus custará US$ 20 por mês. Portanto, embora o ChatGPT possa ser o melhor chatbot de IA versátil, você precisará se aventurar para acessar seus melhores recursos. Você pode ver agora Comparação entre ChatGPT e Google Gemini: Qual é melhor?
