Um marco importante para o estágio atual da IA foi identificado na Wharton School, da Universidade da Pennsylvania – uma das mais prestigiosas faculdades de Administração no mundo.

Submetido a um exame da cadeira de Gerenciamento de Operações, o irmão mais velho do Chatgpt pontuou entre um B- e B, nota suficiente para aprovação, segundo a pesquisa conduzida por Christian Terwiesch, conforme descrito no paper "O Chat GPT3 passaria no MBA de Wharton? Uma previsão baseada em seu desempenho no curso de Gerenciamento de Operações".

Não surpreendentemente, o pesquisador acredita que o desempenho do bot no teste tem "implicações importantes para a educação das faculdades de Administração".

Um porta-voz da startup de inteligência artificial OpenAI, que criou o bot, se recusou a comentar.

Transcrevi abaixo o longo artigo da NBC (com tradução automatizada), mas penso que a parte mais importante está no final: o pesquisador acredita que há uma maneira de combinar educação e IA para melhorar o aprendizado dos alunos: "Eu acho que a tecnologia pode envolver os alunos em outras formas que não o bom e velho 'escreva um texto de cinco páginas'", disse ele. "Mas isso cabe a nós, como educadores, reimaginar a educação e encontrar outras maneiras de envolver os alunos".

Por outro lado, a parte que mais demonstra como o mercado de trabalho tende a ser sacudido pela disponibilidade desse tipo de ferramenta está em outra declaração do professor: "A nota alcançada pelo bot mostra sua notável capacidade de automatizar algumas das habilidades dos trabalhadores do conhecimento altamente remunerados em geral e, especificamente, os trabalhadores do conhecimento nos empregos ocupados por graduados em Administração, incluindo analistas, gerentes e consultores".

Uma nova pesquisa conduzida por um professor da Wharton School da Universidade da Pensilvânia descobriu que o chatbot GPT-3, impulsionado por inteligência artificial, conseguiu passar no exame final do programa de Mestrado em Administração de Empresas (MBA) da escola.

O professor Christian Terwiesch, autor do trabalho de pesquisa "Would Chat GPT3 Get a Wharton MBA? Uma previsão baseada em seu desempenho no curso de Gerenciamento de Operações", disse que o bot pontuou entre um B- e B no exame.

A nota alcançada pelo bot, escreveu Terwiesch, mostra sua "notável capacidade de automatizar algumas das habilidades dos trabalhadores do conhecimento altamente remunerados em geral e, especificamente, os trabalhadores do conhecimento nos empregos ocupados por graduados em MBA, incluindo analistas, gerentes e consultores".

“Trabalho incrível em questões básicas de gerenciamento de operações e análise de processos, incluindo aquelas baseadas em estudos de caso”

O bot fez um "trabalho incrível em questões básicas de gerenciamento de operações e análise de processos, incluindo aquelas baseadas em estudos de caso", escreveu Terwiesch no artigo, publicado em 17 de janeiro. Ele também disse que as explicações do bot eram "excelentes".

O bot também é "notavelmente bom em modificar suas respostas em resposta a dicas humanas", concluiu.

As descobertas de Terwiesch surgem quando os educadores se tornam cada vez mais preocupados que os chatbots de IA possam inspirar trapaças. Embora os chatbots não sejam uma tecnologia nova, o ChatGPT explodiu nas mídias sociais no final de 2022. No início deste mês, o Departamento de Educação da cidade de Nova York anunciou uma proibição do ChatGPT dos dispositivos e redes de suas escolas.

Grande parte do debate é centrado em torno do estilo de fala conversacional do ChatGPT e do estilo de resposta coerente e tópico, o que dificulta a distinção das respostas humanas.

Especialistas que trabalham com inteligência artificial e educação reconheceram que bots como o ChatGPT podem ser um prejuízo para a educação no futuro. Mas em entrevistas recentes, alguns educadores e especialistas não estavam preocupados – ainda.

Um porta-voz da startup de inteligência artificial OpenAI, que criou o bot, se recusou a comentar.

O modelo GPT-3 usado no experimento parece ser um irmão mais velho do mais recente bot ChatGPT que se tornou um tópico controverso entre educadores e aqueles que trabalham no campo da IA. O ChatGPT, a versão mais recente, "é ajustado a partir de um modelo da série GPT-3.5", de acordo com o site da OpenAI.

Embora os resultados do Chat GPT3 tenham sido impressionantes, Terwiesch observou que o Chat GPT3 "às vezes comete erros surpreendentes em cálculos relativamente simples no nível da Matemática da 6ª série".

A versão atual do Chat GPT "não é capaz de lidar com questões de análise de processos mais avançadas, mesmo quando são baseadas em modelos bastante padrão", acrescentou Terwiesch. "Isso inclui fluxos de processo com vários produtos e problemas com efeitos estocásticos, como a variabilidade da demanda."

Ainda assim, Terwiesch disse que o desempenho do ChatGPT3 no teste tem "implicações importantes para a educação das escolas de negócios, incluindo a necessidade de políticas de exames, design de currículo com foco na colaboração entre humanos e IA, oportunidades para simular processos de tomada de decisão do mundo real, a necessidade de ensinar a resolução criativa de problemas, maior produtividade do ensino e muito mais".

Depois de publicar seu artigo, Terwiesch disse à NBC News que se tornou mais consciente do debate em torno do bot de bate-papo e da conversa subsequente em torno de se ele deve ser banido.

Ele acredita que há uma maneira de casar educação e IA para melhorar o aprendizado de seus alunos.

"Eu acho que a tecnologia pode envolver os alunos em outras formas que não o bom e velho 'escreva um ensaio de cinco páginas'", disse ele. "Mas isso cabe a nós, como educadores, reimaginar a educação e encontrar outras maneiras de envolver os alunos."