.
Benj Edwards / Midjourney
No mundo atual de chatbots de IA generativa, testemunhamos o aumento repentino do ChatGPT da OpenAI, lançado em novembro, seguido pelo Bing Chat em fevereiro e pelo Bard do Google em março. Decidimos colocar esses chatbots à prova com uma variedade de tarefas para determinar qual deles reina supremo na arena de chatbots de IA. Como o Bing Chat usa tecnologia GPT-4 semelhante ao modelo ChatGPT mais recente, optamos por nos concentrar em dois titãs da tecnologia AI chatbot: OpenAI e Google.
Testamos o ChatGPT e o Bard em sete categorias críticas: piadas de pai, diálogo argumentativo, problemas de palavras matemáticas, resumo, recuperação factual, escrita criativa e codificação. Para cada teste, inserimos exatamente a mesma instrução (chamada de “prompt”) no ChatGPT (com GPT-4) e no Google Bard. Usamos o primeiro resultado, sem escolha seletiva.
Vale a pena notar que uma versão do ChatGPT baseada no modelo GPT-3.5 anterior também está disponível, mas não a usamos no teste. Como usamos apenas o GPT-4, nos referiremos ao ChatGPT como “ChatGPT-4” neste artigo para reduzir a confusão.
Obviamente, este não é um estudo científico e pretende ser uma comparação divertida das capacidades dos chatbots. As saídas podem variar entre as sessões devido a elementos aleatórios, e avaliações posteriores com diferentes prompts produzirão resultados diferentes. Além disso, os recursos desses modelos mudarão rapidamente com o tempo, à medida que o Google e a OpenAI continuarem a atualizá-los. Mas, por enquanto, é assim que as coisas estão no início de abril de 2023.
piadas de pai
Para aquecer nosso concurso de inteligência, pedimos ao ChatGPT e ao Bard que escrevessem algumas piadas. E como o auge da comédia pode ser encontrado na forma de piadas de pai, nos perguntamos se os dois chatbots poderiam criar algumas únicas.
Incitar: Escreva 5 piadas originais sobre o pai
-
Uma captura de tela de 5 “piadas de papai” do Google Bard.
Benj Edwards / Strong The One
-
Uma captura de tela de 5 “piadas de papai” do ChatGPT-4.
Benj Edwards / Strong The One
Das cinco piadas de pai de Bard, encontramos três delas literalmente na Internet usando uma pesquisa no Google. Um dos exemplos (o das “uvas”) é meio emprestado de um tweet de uma piada de Mitch Hedberg, mas está corrompido por um lamentável jogo de palavras que preferimos não tentar interpretar. E, surpreendentemente, há uma piada aparentemente original (sobre o caracol) que não encontramos em nenhum outro lugar, mas não faz sentido.
Enquanto isso, as cinco piadas de pai do ChatGPT-4 eram 100% sem originalidade, todas retiradas completamente de outras fontes, mas foram entregues com precisão. Como as piadas do pai devem ser mais dignas de gemidos do que inteligentes, parece que Bard superou o ChatGPT-4 aqui. Bard também tentou criar piadas originais (seguindo nossas instruções), embora algumas tenham falhado terrivelmente de uma forma embaraçosa (o que é do tipo pai), e até mesmo colocaram o pé na boca, por assim dizer, de forma não intencional (também pai-like). como).
Vencedor: Bardo
.
