Os professores podem detectar o Google Bard e o ChatGPT?

o que saber

• Sim, os professores podem detectar se a redação de um aluno foi escrita usando o Google Bard e o ChatGPT . No entanto, eles não poderão dizer isso definitivamente, pois a eficácia de seus métodos é duvidosa.
• Uma das principais ferramentas para detectar conteúdo gerado por IA é o Turnitin, que também é prejudicado pelo problema de gerar falsos positivos e nem sempre produz resultados precisos.
• Escolas e universidades podem considerar positivamente a integração de chatbots de IA no sistema educacional, em vez de proibir seu uso.

O advento de chatbots de IA como Bard e ChatGPT causou um grande rebuliço no setor educacional, para dizer o mínimo. Não é nenhum segredo que muitos alunos estão usando essas tecnologias de IA de última geração para produzir redações em tempo real para melhorar suas notas. Mas muitos mais estão simplesmente usando-o como uma tecnologia para melhorar suas pesquisas e aprender melhor .

A repressão ao conteúdo gerado por IA visa impedir que os alunos os usem como muleta, mas também impede que muitos alunos usem essas ferramentas por medo de serem chamados de trapaceiros. Mas os professores podem detectar se o trabalho dos alunos foi gerado por chatbots de IA como Bard e ChatGPT? A resposta não é tão direta quanto se poderia esperar.

Neste artigo, investigamos as alegações feitas por aqueles que fazem parte da academia e descobrimos se o conteúdo gerado por IA pode realmente ser detectado como tal.

Os professores podem detectar se os alunos usam o Google Bard ou o ChatGPT para escrever redações?

Esta é a pergunta na mente dos estudantes em todo o mundo. Dada a facilidade com que os alunos podem acessar e usar o Bard e o ChatGPT para fazer redações, a tarefa dos professores tornou-se reconhecidamente mais difícil.

the fact that I’ve had 2 separate teachers email me about 2 separate students who both plagiarized their essays by using an AI generator… yikes.

this is going to become more common. thankfully we do have AI/plagiarism detectors to identify, but it shouldn’t happen at all.

— lexi ✨ (@misslexilouwho) March 30, 2023

Aprender a vencer uma nova tecnologia que está avançando no ritmo desses chatbots de IA é, sem dúvida, uma luta difícil. Mas, do jeito que está agora, o corpo docente da sua escola ou universidade pode realmente descobrir se as redações dos alunos foram de fato escritas por eles ou copiadas das respostas geradas pela IA.

Embora os alunos que usam ensaios escritos por Bard ou ChatGPT muitas vezes acabem reescrevendo, editando e citando as fontes para dar a seus ensaios a aparência de trabalho original e rigor acadêmico, professores e professores também têm alguns truques na manga para descobrir se o aluno ensaios estão realmente usando chatbots para fazer seu trabalho para eles.

Como os professores estão aprendendo a identificar o uso do Bard e do ChatGPT

Existem algumas maneiras pelas quais os professores já podem determinar organicamente se um ensaio é ou não escrito pelo aluno em suas próprias palavras. Muito disso se resume ao próprio entendimento do professor sobre o que um determinado aluno pode ou não fazer. Portanto, se um professor conhece as habilidades linguísticas de um aluno, seu nível de dicção, compreensão, frases comumente usadas, estruturas de sintaxe etc., qualquer desvio de suas idiossincrasias individuais (pelo menos na escrita) pode ser detectado com relativa facilidade , especialmente se for uma partida muito rígida.

Por outro lado, como esses chatbots de IA muitas vezes acabam gerando respostas que não são indicativas de uma mente pensante e podem ser bastante medíocres sem muita análise crítica, os professores que conhecem bem seus alunos poderão farejá-los a um quilômetro de distância. .

Comentário
de u/ADHTeacher da discussão Como posso saber quando meus alunos usam o Chat GPT ou outros escritores de IA?
em professores

Mas muitos alunos estão se opondo a isso, dando instruções bem estruturadas para obter as melhores respostas possíveis, altamente individualizadas e humanas. No entanto, se os alunos estão usando ferramentas de IA para escrever suas redações, os professores também estão encontrando maneiras de utilizar as mesmas ferramentas para descobrir se há plágio envolvido.

Algumas ferramentas do AI Detector que os professores estão usando

Assim como os mecanismos de busca e sites informativos como Google e Wikipedia foram combatidos por um influxo de ferramentas de detecção de plágio que estão conosco até hoje, a revolução da IA ​​também está gerando muitas ferramentas de detecção de IA. Muitos membros do corpo docente já começaram a usar algumas dessas ferramentas de detecção de plágio de IA, especialmente aqueles que ensinam muito mais alunos do que podem contar ou lembrar pelo nome.

Algumas dessas ferramentas de detecção de IA incluem GPTZero , classificador de texto próprio da OpenAI , Turnitin , etc. muitos falsos positivos (escrita humana sinalizada como IA).

O Turnitin pode detectar o ChatGPT?

No início deste ano, a Turnitin anunciou seu detector de escrita AI que pode identificar se um pedaço de prosa enviado pelos alunos contém ou não frases escritas pelo ChatGPT e seus primos.

Em um vídeo do YouTube , David Adamson, cientista de IA da Turnitin, demonstrou como a ferramenta pode detectar a originalidade da prosa escrita, mesmo quando algumas das frases foram alteradas e pequenas edições foram feitas. Embora não tenhamos testado o Turnitin, o consenso geral é que a ferramenta faz um bom trabalho na captura de conteúdo de IA. Os novos recursos do Turnitin são úteis apenas para professores no domínio da escrita acadêmica, no entanto, não para testar códigos ou poesia. Portanto, se você é um aluno que depende do ChatGPT e do Bard, deve estar ciente de que ferramentas como o Turnitin podem realmente pegá-lo.

No entanto, existem algumas ressalvas para isso também. O Turnitin procura priorizar a precisão, o que significa que quer ter certeza de que o conteúdo que sinaliza é realmente escrito por IA. Mas também significa que definitivamente perderá algum conteúdo escrito por IA. Aqui está David Adamson sendo honesto sobre os recursos do Turnitin a partir de agora:

O Turnitin tem 1% de chance de gerar falsos positivos para a redação do ensino superior. O número pode não inspirar muita esperança. Mas para a redação do ensino fundamental e médio, a porcentagem de falsos positivos pode ser maior. Isso se deve em grande parte ao fato de que o software sinalizará a escrita repetitiva e redundante como gerada por IA, mesmo que não seja. Mas tudo isso está sendo trabalhado. Portanto, na maioria das vezes, parece que pode ficar mais difícil para os alunos passarem a prosa escrita por IA como se fossem deles se essas ferramentas saírem à frente do jogo. Improvável, mas possível.

Como os professores estão combatendo o uso do Bard e do ChatGPT

Além de usar ferramentas de detecção de IA e entender do que um aluno é capaz, existem algumas outras maneiras pelas quais professores e professores estão combatendo o uso de Bard e ChatGPT.

Em vez de pedir aos alunos que escrevam redações sobre tópicos que foram escritos até a morte e estão prontamente disponíveis on-line, muitos membros do corpo docente estão apresentando questões dissertativas baseadas em discussões em classe ou aquelas que exigem um toque altamente pessoal que reflete a honestidade do aluno. opiniões individuais.

Além disso, os professores também estão brincando com o ChatGPT para entender que tipo de respostas ele produz e o tipo de perguntas que ele responde mal. Alguns começaram a alimentar os ensaios dos alunos no próprio ChatGPT e a perguntar se o conteúdo escrito foi produzido pelo ChatGPT ou por uma ferramenta de IA semelhante.

Como o uso de IA para detectar conteúdo gerado por IA pode prejudicar alguns alunos

Quando os chatbots de IA começam a fazer a maior parte do trabalho, é menos provável que os alunos desenvolvam pensamento crítico e compreendam as habilidades necessárias para o próprio ato de escrever. Mas há muitos mais que o estão usando não para trapacear, mas como um substituto para os mecanismos de busca como o Google, porque simplifica muito a tarefa de pesquisa.

Há definitivamente um argumento a ser feito sobre aprender o ato de pesquisar em si, já que o ChatGPT nem sempre pode desenterrar as ideias mais potentes e relevantes que só podem ser obtidas lendo artigos de pesquisa e compreendendo as nuances e o ponto de vista do autor. Mas, exceto isso, o ChatGPT também pode extrair de uma ampla variedade de fontes que podem ser bastante úteis e podem ser usadas como um portal para os domínios onde os trabalhos de pesquisa realmente estão.

If you are a teacher/Academic who has detected that your students started using AI for their assignments.

Firstly
1) Don't shame them or make them feel guilty.
2) Talk to them about the prompts they used. (Learn from them).
3) Open up the class for a discussion on++

— Saiswaroopa (@Sai_swaroopa) March 26, 2023

Se os alunos fossem estritamente proibidos de usar o ChatGPT, seria um desperdício terrível, não apenas para o aprendizado dos alunos na escola, mas também para o futuro deles no mundo exterior para o qual estão sendo preparados.

Como chatbots como Bard e ChatGPT podem ser integrados à educação

Chatbots como Bard e ChatGPT não podem ser evitados pela academia. Professores e professores devem, em vez disso, encorajar os alunos a aprender a tecnologia, suas vantagens e armadilhas e integrá-los ao contexto educacional.

I saw a teacher using chatgpt to get her students to write essays. They try various prompts and try and compile the best bits while adding their own insights. They have to point out what it got wrong, and find sources. I think there is a smart way for educators to use AI.

— Josh Martin (@joshalexmartin) March 24, 2023

Proibir o uso do ChatGPT e chatbots de IA semelhantes só pode ser uma solução a curto prazo. O crescimento adicional da tecnologia de IA invariavelmente apresentará desafios únicos que podem crescer além da capacidade de ferramentas de detecção de IA como o Turnitin. Até lá, a tarefa dos professores está bem recortada. E os alunos podem continuar, com atenção, a obter assistência do ChatGPT e do Bard.

Para concluir, sim, seus professores têm várias ferramentas e truques para identificar se as redações dos alunos são copiadas do ChatGPT e do Bard. No entanto, dado que as ferramentas do detector de IA sempre vão acompanhar os chatbots de IA, na maioria das vezes eles vão ficar aquém. Em vez de proibir o uso dessas tecnologias de IA de última geração, escolas e universidades devem procurar integrá-las ao sistema educacional ou criar maneiras novas e engenhosas de testar o aprendizado dos alunos. Até que isso aconteça, pode-se esperar que os alunos continuem aproveitando as ferramentas de IA para suas tarefas.