.
Uma nova pesquisa da Universidade de Montana e seus parceiros sugere que a inteligência artificial pode igualar o 1% dos pensadores humanos em um teste padrão de criatividade.
O estudo foi dirigido pelo Dr. Erik Guzik, um professor clínico assistente na UM’s College of Business. Ele e seus parceiros usaram os Testes Torrance de Pensamento Criativo, uma ferramenta conhecida usada por décadas para avaliar a criatividade humana.
Os pesquisadores enviaram oito respostas geradas pelo ChatGPT, o aplicativo alimentado pelo mecanismo de inteligência artificial GPT-4. Eles também enviaram respostas de um grupo de controle de 24 alunos da UM que frequentavam as aulas de empreendedorismo e finanças pessoais de Guzik. Essas pontuações foram comparadas com 2.700 estudantes universitários em todo o país que fizeram o TTCT em 2016. Todos os envios foram avaliados pelo Scholastic Testing Service, que não sabia que a IA estava envolvida.
Os resultados colocaram o ChatGPT na elite da criatividade. O aplicativo de IA estava no percentil superior em fluência – a capacidade de gerar um grande volume de ideias – e em originalidade – a capacidade de apresentar novas ideias. A IA caiu um pouco – para o 97º percentil – em termos de flexibilidade, a capacidade de gerar diferentes tipos e categorias de ideias.
“Para ChatGPT e GPT-4, mostramos pela primeira vez que ele está entre os primeiros 1% em originalidade”, disse Guzik. “Isso era novo.”
Ele ficou satisfeito ao notar que alguns de seus alunos da UM também tiveram desempenho entre os 1% melhores. No entanto, o ChatGTP superou a grande maioria dos estudantes universitários nacionalmente.
Guzik testou a IA e seus alunos durante o semestre da primavera. Ele foi auxiliado no trabalho por Christian Gilde da UM Western e Christian Byrge da Universidade de Vilnius. Os pesquisadores apresentaram seu trabalho em maio na Southern Oregon University Creativity Conference.
“Tivemos muito cuidado na conferência para não interpretar muito os dados”, disse Guzik. “Acabamos de apresentar os resultados. Mas compartilhamos fortes evidências de que a IA parece estar desenvolvendo capacidade criativa igual ou até superior à capacidade humana.”
Guzik disse que perguntou ao ChatGPT o que ele indicaria se tivesse um bom desempenho no TTCT. A IA deu uma resposta forte, que eles compartilharam na conferência:
“O ChatGPT nos disse que podemos não entender totalmente a criatividade humana, o que acredito ser correto”, disse ele. “Também sugeriu que podemos precisar de ferramentas de avaliação mais sofisticadas que possam diferenciar entre ideias humanas e geradas por IA”.
Ele disse que o TTCT é um material proprietário protegido, então o ChatGPT não poderia “trapacear” acessando informações sobre o teste na internet ou em um banco de dados público.
Guzik há muito se interessa por criatividade. Como um aluno da sétima série crescendo na pequena cidade de Palmer, Massachusetts, ele estava em um programa para alunos talentosos e superdotados. Essa experiência o apresentou ao processo de Solução de Problemas Futuros desenvolvido por Ellis Paul Torrance, o psicólogo pioneiro que também criou o TTCT. Guzik disse que se apaixonou por brainstorming naquela época e como ele explora a imaginação humana, e ele continua ativo na organização Future Problem Solving – até mesmo conhecendo sua esposa em uma de suas conferências.
Guzik e sua equipe decidiram testar a criatividade do ChatGPT depois de brincar com ele durante o ano passado.
“Todos nós estávamos explorando o ChatGPT e percebemos que ele estava fazendo algumas coisas interessantes que não esperávamos”, disse ele. “Algumas das respostas foram novas e surpreendentes. Foi quando decidimos colocá-lo à prova para ver o quão criativo ele realmente é.”
Guzik disse que o teste TTCT usa instruções que imitam tarefas criativas da vida real. Por exemplo, você pode pensar em novos usos para um produto ou melhorá-lo?
“Digamos que é uma bola de basquete”, disse ele. “Pense em quantos usos de uma bola de basquete você puder. Você pode arremessá-la em um aro e usá-la em uma exibição. Se você se forçar a pensar em novos usos, talvez você a corte e use como plantador. Ou com um tijolo você pode construir coisas ou pode ser usado como peso de papel. Mas talvez você o triture e transforme em algo completamente novo.
Guzik esperava que o ChatGPT fosse bom em criar muitas ideias (fluência), porque é isso que a IA generativa faz. E se destacou por responder ao prompt com muitas ideias relevantes, úteis e valiosas aos olhos dos avaliadores.
Ele ficou mais surpreso com o quão bem ele gerou ideias originais, que é uma marca registrada da imaginação humana. Os avaliadores do teste recebem listas de respostas comuns para um prompt – aquelas que são quase esperadas para serem enviadas. No entanto, a IA ficou no percentil superior para apresentar novas respostas.
“Na conferência, soubemos de pesquisas anteriores sobre GPT-3 feitas há um ano”, disse Guzik. “Naquela época, o ChatGPT não pontuava tão bem quanto os humanos em tarefas que envolviam pensamento original. Agora, com o GPT-4 mais avançado, está no top 1% de todas as respostas humanas.”
Com os avanços da IA acelerando, ele espera que ela se torne uma ferramenta-chave para o mundo dos negócios daqui para frente e um novo e significativo impulsionador da inovação regional e nacional.
“Para mim, criatividade é fazer as coisas de maneira diferente”, disse Guzik. “Uma das definições de empreendedorismo que adoro é que ser empreendedor é pensar de maneira diferente. Portanto, a IA pode nos ajudar a aplicar o mundo do pensamento criativo aos negócios e ao processo de inovação, e isso é fascinante para mim.”
Ele disse que a UM College of Business está aberta para ensinar sobre IA e incorporá-la aos cursos.
“Acho que sabemos que o futuro incluirá IA de alguma forma”, disse Guzik. “Temos que ter cuidado sobre como é usado e considerar as regras e regulamentações necessárias. Mas as empresas já o estão usando para muitas tarefas criativas. Em termos de empreendedorismo e inovação regional, isso muda o jogo.”
.
