Na arena em rápida evolução da inteligência artificial, estão a surgir novas tecnologias, como é o caso com a chegada do modelo Gemini AI da Google, levantando a questão de como este modelo pode superar os seus concorrentes.
O Google tem prometido consistentemente que seu modelo Gemini AI será melhor do que o modelo GPT-4 da OpenAI, que é o modelo que alimenta o ChatGPT Plus. Agora que o Google Gemini foi lançado, podemos finalmente testá-lo e ver como o Gemini AI se compara ao GPT-4.
Quando o Google lançou o Gemini em março de 2023, havia muitos motivos para estar entusiasmado com isso. Muitas pessoas pensaram que finalmente o monopólio ChatGPT da OpenAI seria quebrado e teríamos uma concorrência digna. verificar Usar IA como ChatGPT e Gemini em consultoria financeira: é confiável?
Mas o Gemini nunca foi o gigante da IA que muitos usuários esperavam que fosse, e o GPT-4 continua sendo o modelo dominante de chatbot de IA. Agora, o Google Gemini está no ar, mas o tão esperado modelo de IA é melhor que o ChatGPT?
Links Rápidos
Qual é o modelo Gemini AI do Google?
Gemini AI é o modelo de IA mais capaz do Google, capaz de compreender e agir em diferentes formatos de dados, incluindo texto, áudio, imagem e vídeo. É a tentativa do Google de criar um modelo unificado de IA que extraia seus recursos de tecnologias de IA mais capazes. Gemini estará disponível em três variantes:
- Gêmeos Ultra: A versão maior e mais capaz, projetada para lidar com tarefas altamente complexas.
- Gêmeos Pro: O melhor modelo para dimensionar e fornecer alto desempenho em uma ampla gama de tarefas, mas menos capaz que o Ultra.
- Gêmeos Nano: o modelo mais eficiente projetado para implantar tarefas no dispositivo. Por exemplo, os desenvolvedores podem usar o Gemini Nano para criar aplicativos móveis ou sistemas integrados, trazendo recursos poderosos de IA para o espaço móvel.
Google diz em seu blog oficial A palavra-chaveGemini Ultra supera a tecnologia mais recente em muitos padrões. O Google afirma que o Gemini Ultra supera o GPT-4 líder do setor em vários benchmarks importantes.
Com uma pontuação sem precedentes de 90.0% no rigoroso benchmark MMLU, o Google afirma que o Gemini Ultra é o primeiro modelo a exceder o desempenho de nível humano neste teste multifacetado de 57 sujeitos.
Gemini Ultra também pode compreender, explicar e gerar código de alta qualidade em algumas das linguagens de programação mais populares do mundo, incluindo Go, JavaScript, Python, Java e C++. No papel, todos esses resultados são ótimos. Mas estes são todos padrões, e os padrões nem sempre contam toda a história. Então, qual é o desempenho do Gemini em missões do mundo real?
Como usar o Gemini AI do Google
Das três variantes do modelo Gemini AI, você pode começar a usar o Gemini Pro agora. Atualmente, o Gemini Pro está disponível no chatbot Gemini do Google. Para usar o Gemini Pro com o Gemini, vá para bard.google.com Entre com sua conta do Google.
O Google diz que o Gemini Ultra será lançado em janeiro de 2024, então tivemos que nos contentar em testar o Gemini Pro contra o ChatGPT por enquanto.
Como o Gemini se compara ao GPT-3.5 e GPT-4
Quando qualquer novo modelo de IA é lançado, ele é testado em relação aos modelos GPT AI da OpenAI, que são geralmente aceitos como o modelo de ponta que outros modelos devem acompanhar. Assim, usando Gemini e ChatGPT, testamos a habilidade do Gemini em matemática, escrita criativa, geração de código e processamento de entradas de imagem com precisão.
Começando com a questão matemática mais fácil que conseguimos imaginar, pedimos aos dois chatbots que a resolvessem: -1 x -1 x -1.
Comece Gêmeos primeiro. Repetimos a pergunta duas vezes, todas com respostas erradas. Obtivemos a resposta na terceira tentativa, mas não conta.
Tentamos executar o ChatGPT no GPT-3.5. A primeira resposta estava correta.
Para testar as habilidades de interpretação de imagens de Gêmeos, pedimos a ele que interpretasse alguns memes populares. Ele recusou, dizendo que não poderia interpretar fotos com pessoas nelas. ChatGPT, que executa GPT-4V, estava disposto e era capaz de fazer isso perfeitamente.
Fizemos outra tentativa de fazê-lo interpretar uma imagem enquanto testávamos sua capacidade de resolução de problemas e programação. Demos ao Gemini, executando o Gemini Pro, uma captura de tela e pedimos que ele interpretasse e escrevesse código HTML e CSS para replicar a captura de tela.
Aqui está a captura de tela da fonte.
Abaixo está a tentativa do Gemini Pro de interpretar e replicar a captura de tela usando HTML e CSS.
Esta é a tentativa do GPT-4 de replicar a captura de tela. O resultado não é surpreendente, considerando que o GPT-4 tem sido historicamente poderoso em programação. Já mostramos anteriormente Como usar o GPT-4 para criar um aplicativo web do zero.
Pedimos ao Gemini Pro que compusesse um poema sobre Tesla (a marca de carros elétricos). Ele mostrou melhorias marginais em relação aos testes anteriores que fizemos no passado. Este é o resultado:
Neste ponto, pensamos que seria mais apropriado comparar os resultados com o GPT-3.5 em vez do mais poderoso GPT-4. Então, pedimos ao ChatGPT baseado em GPT-3.5 para criar um poema semelhante.
Esta pode ser uma escolha pessoal, mas o que o Gemini Pro criou parece melhor. Mas vamos deixar você ser o juiz. Verificar Explore o projeto Gemini AI do Google: um mergulho profundo em tecnologias e inovações de ponta.
Gêmeos é melhor que ChatGPT?
Antes de o Google lançar o Gemini, pensávamos que seria o concorrente ChatGPT que esperávamos, mas não foi. Agora, o Gemini está aqui e, até agora, o Gemini Pro não parece o modelo para dar o nocaute ao ChatGPT.
O Google diz que o Gemini Ultra será muito melhor. Nós realmente esperamos que seja esse o caso e que atenda ou exceda as afirmações feitas no anúncio do Gemini Ultra. Mas até vermos e testarmos a melhor versão do modelo generativo de IA do Google, não saberemos se ele pode vencer outros concorrentes do modelo de IA. Por enquanto, o GPT-4 continua sendo o campeão indiscutível do paradigma de IA. Você pode ver agora Explore maneiras de acessar o GPT-4 gratuitamente.