Atualmente Vazio: R$0.00
Sobre a Aula
O processo de escrita, redefinido na Era da IA
Quais são algumas práticas recomendadas emergentes para usar IA em uma sala de aula de redação de nível universitário?
Algumas descobertas de um dos primeiros a adotar
O professor associado Ethan Mollick da The Wharton School tem investigado e experimentado o uso aberto de IA nas tarefas de seus alunos. Ele tem alguns insights úteis para professores que consideram se, por que e como trazer IA para suas práticas de sala de aula.
Mollick acredita que “focar em como as pessoas usam a IA em sala de aula, em vez de se elas a usam, resultará em melhores resultados de aprendizagem, alunos mais felizes e graduados mais bem preparados para um mundo onde a IA provavelmente será onipresente”.
Concordamos e ficaremos felizes em compartilhar algumas de suas primeiras descobertas com você!
Postagem de Ethan Mollick de 17/02/23:
Eu adotei totalmente a IA para minhas aulas neste semestre, exigindo que os alunos usem ferramentas de IA de várias maneiras. Essa política atraiu muito interesse, e pensei que valeria a pena refletir sobre como está indo até agora. A resposta curta é: ótimo! Mas aprendi algumas lições iniciais que acho que valem a pena passar adiante.
Primeiro, como pano de fundo, eu exigi o uso de IA de maneiras ligeiramente diferentes em três aulas separadas de empreendedorismo e inovação de nível de graduação e mestrado. Uma aula foi construída sobre uso extensivo de IA: eu exigi que os alunos usassem IA para ajudá-los a gerar ideias, produzir material escrito, ajudar a criar aplicativos, gerar imagens e muito mais. Outra aula tinha tarefas que exigiam que os alunos usassem IA e outras tarefas em que a IA era opcional. Para a aula final, eu os apresentei às ferramentas de IA e sugeri seu uso, mas não tinha tarefas específicas de IA.
Todas as classes tinham a mesma política de IA, e eu forneci a cada classe meus guias para gerar ideias e escrever com o ChatGPT
Sem treinamento, todos usam IA de forma errada
Tenho ouvido relatos de professores sobre como eles estão vendo muitas redações mal escritas sobre IA, embora o ChatGPT seja capaz de escrever muito bem. Acho que sei o porquê. As tentativas iniciais de quase todo mundo de usar IA são ruins.
Em uma tarefa, pedi aos alunos que “trapaceassem”. Foi-lhes dito:
- “Você precisa gerar uma redação de 5 parágrafos sobre um tópico relevante para as lições que aprendeu na aula até agora (dinâmica de equipe, seleção de líderes, avaliações pós-ação, comunicação de uma visão – o que você quiser!), mas você terá uma IA fazendo isso por você.”
- “Você também gerará pelo menos 1 ilustração para acompanhar sua redação.”
- Eles tiveram que tentar pelo menos 5 prompts e escrever uma reflexão no final sobre o desempenho da IA.
Os primeiros prompts de quase todos eram muito diretos. Eles geralmente colavam a tarefa diretamente, algo como gerar uma redação de 5 parágrafos sobre seleção de líderes. Às vezes, eles iam um pouco mais longe: usavam um tom acadêmico ou escreviam para uma aula de MBA. O resultado era quase sempre uma redação medíocre C-.
Acho que é isso que a maioria dos professores está vendo e por isso muitas pessoas subestimam o que o ChatGPT pode fazer como uma ferramenta de escrita.
No entanto, na minha tarefa, exigi que os alunos usassem vários prompts, o que os forçou a considerar como melhorar seus resultados.
Três abordagens, mas uma funciona melhor
Neste ponto, os alunos seguiram uma das três direções. Ajudaria mostrar exemplos desses caminhos, então escrevi prompts fictícios:
Abordagem 1 (não recomendada): Pequenas variações, deixando a IA fazer o trabalho
Primeira tentativa:
Generate a 5 paragraph essay on selecting leadersSegunda tentativa:
Generate a 5 paragraph essay on how leaders are selected by teamsTerceira tentativa:
Generate a 5 paragraph essay on how leaders are selected by teams and how team process worksQuarta tentativa:
Generate a 5 paragraph essay on how leaders are selected by teams, team process, and leadership ability.Quinta tentativa:
Generate a 5 paragraph essay on how leaders are selected by teams, team process, and leadership ability, 250 words.Abordagem 2 (não recomendada): Adicionar restrições e conhecimento do usuário
Primeira tentativa:
Generate a 5 paragraph essay on selecting leaders.Segunda tentativa:
Generate a 5 paragraph essay on selecting leaders, cover the babble hypothesis, leader status effects, and seniority.Terceira tentativa:
Generate a 5 paragraph essay on selecting leaders, cover the babble hypothesis, leader status effects, and seniority. Explain that the babble effect is that whoever talks the most is made leader.Quarta tentativa:
Generate a 5 paragraph essay on selecting leaders, cover the babble hypothesis, leader status effects, and seniority. Explain that the babble effect is that whoever talks the most is made leader. Use examples. Use vivid language and take the perspective of a management consultant who has gone back for her MBA. Write for a professor in an MBA class on team strategy and entrepreneurship.Quinta tentativa:
Generate a 5 paragraph essay on selecting leaders, cover the babble hypothesis, leader status effects, and seniority. Explain that the babble effect is that whoever talks the most is made leader. Consider the challenges and advantages of each approach. Use examples. Use active tense and storytelling. Use vivid language and take the perspective of a management consultant who has gone back for her MBA. Write for a professor in an MBA class on team strategy and entrepreneurship.Abordagem 3 (recomendada): Coedição
Primeira tentativa:
Generate a 5 paragraph essay on selecting leaders.Segunda tentativa:
That is good, but the third paragraph isn’t right. The babble effect is that whoever talks the most is made leader. Correct that and add more details about how it is used. Add an example to paragraph 2.Terceira tentativa:
The example in paragraph 2 isn’t right, presidential elections are held every 4 years. Make the tone of the last paragraph more interesting. Don’t use the phrase “in conclusion”.Quarta tentativa:
Give me three possible examples I could use for paragraph 4, and make sure they include more storytelling and more vivid language. Do not use examples that feature only men.Quinta tentativa:
Add the paragraph back to the story, swap out the second paragraph for a paragraph about personal leadership style. Fix the final paragraph so it ends on a hopeful note.Análise: Qual abordagem de estímulo parece mais eficaz para a aprendizagem dos alunos?
A primeira abordagem produziu resultados medíocres e os alunos com esses tipos de estímulos muitas vezes descreveram os resultados como bastante insípidos.
A segunda abordagem foi significativamente melhor, mas os resultados foram mais variáveis, pois os alunos estavam envolvidos em tentativa e erro com prompts inteiros. Isso tornou difícil o ajuste fino de uma boa redação, e os alunos que usavam essa abordagem frequentemente comentavam que sentiam que não tinham muito controle sobre as saídas da IA.
De longe, a melhor abordagem, que levou tanto às melhores redações quanto aos alunos mais impressionados, aconteceu quando as pessoas adotaram a abordagem de coedição.
A abordagem exigiu muito foco cuidadoso na saída da IA, o que também a tornou muito útil para o aprendizado do aluno. Como discutimos em nosso whitepaper, ensinar uma IA para melhorar uma redação é um método pedagógico que pode produzir novos insights. Eu sugiro fortemente que você empurre os alunos nessa direção, se pretende incorporar redações de IA em suas aulas.
O treinamento em técnicas básicas de engenharia rápida será importante
Outra lição importante foi que o treinamento em ferramentas de IA é realmente importante, e os alunos precisam aprender os conceitos básicos de criação de prompts. Em outras aulas, antes de eu ensinar os alunos a usar IA, muitos usavam prompts simples que produziam resultados ruins.
Depois de discutir as ferramentas e compartilhar meus guias, o prompting melhorou muito e os resultados em sala de aula melhoraram drasticamente. Mas mesmo assim, a maioria dos alunos não estava usando as técnicas de prompting mais avançadas, como dar personas do ChatGPT (“Você é um aluno de MBA que passou 4 anos trabalhando nas forças armadas em logística. Você é um excelente escritor e usa exemplos claros. Você não se repete”), sem mais instruções.
Insight: Os alunos entendem questões de precisão e viés
Tenho visto muitos educadores preocupados com o fato de que a IA mente, frequentemente e bem. Mas, vendo o trabalho dos meus alunos, acho que isso é um problema menor do que muitos pensam.
Os alunos entenderam a falta de confiabilidade da IA muito rapidamente e levaram a sério minha política de que eles são responsáveis pelos fatos em suas redações. Ficou claro que eles verificaram cuidadosamente as afirmações no trabalho de IA (outra oportunidade de aprendizado!), e muitos relataram encontrar as alucinações usuais — histórias inventadas, citações inventadas — embora o grau em que esses problemas eram evidentes variasse de prompt para prompt.
As verificações de fatos mais interessantes foram aquelas focadas em diferenças sutis (“capturou os fatos básicos do exemplo, mas não a nuance”), sugerindo um envolvimento profundo com os conceitos subjacentes. Lendo essas reflexões, acho que deveríamos estar um pouco menos preocupados com a ideia de que os alunos sempre serão enganados por um ChatGPT mentiroso.
Os alunos são capazes de entender os limites das ferramentas, e o foco nos fatos os força a prestar atenção aos detalhes da redação sobre IA, criando alguns momentos realmente didáticos.
Da mesma forma, os alunos estavam muito cientes das questões de viés nesses sistemas, embora o ChatGPT fosse menos preocupante do que as ferramentas de geração de imagens. A tendência das ferramentas de produzir imagens tendenciosas (MBAs eram quase sempre retratados como homens por padrão em algumas ferramentas, por exemplo) era aparente para muitos alunos.
Foi útil discutir isso em sala de aula ao apresentar essas ferramentas.
Insight: A IA já está em todo lugar
Mesmo que eu não tenha adotado a IA, também está claro que a IA agora está em todos os lugares nas aulas. Por exemplo, os alunos a usaram para ajudá-los a ter ideias para projetos de classe, mesmo antes de eu ensiná-los a fazer isso. Como resultado, os projetos deste semestre são muito melhores do que as aulas anteriores pré-IA. Isso levou a maiores taxas de sucesso de projetos e equipes mais engajadas.
No lado negativo, acho que os alunos também levantam menos as mãos para fazer perguntas. Suspeito que isso pode ser porque, como um deles me disse, eles podem depois pedir ao ChatGPT para explicar coisas que não entenderam sem precisar falar na frente da classe. O mundo do ensino agora é mais complicado de maneiras que são emocionantes, assim como um pouco enervantes.