ANÁLISE DO USO DO CHATGPT NA RESOLUÇÃO DE QUESTÕES DE FÍSICA DO ENEM 2023: UMA ABORDAGEM CRÍTICA E COMPARATIVA
Argemiro Midonês Bastos, Cássio Renato Santos, Elys Da Silva Mendes, Emanuel Thiago De Oliveira Sousa, Nayara França Alves
- Evento
- Simpósio Nacional de Ensino de Física ↗ (SNEF)
- Edição
- XXVI
- Ano
- 2025
- Data
- 23/01/2025
- Linha de pesquisa
- Tecnologias Da Informação E Comunicação No Ensino De Físicacódigo De Apresentação
- Tipo
- Comunicação
Abrir o PDF original ↗ Baixar referência .bib Ver todos do SNEF 2025
Texto completo
## ANÁLISE DO USO DO CHATGPT NA RESOLUÇÃO DE QUESTÕES DE FÍSICA DO ENEM 2023: UMA ABORDAGEM CRÍTICA E COMPARATIVA
Argemiro Midonês Bastos 1 , Cássio Renato Santos 2 , Elys da Silva Mendes 3 Emanuel Thiago de Oliveira Sousa 4 , Nayara França Alves 5
- 1 Instituto Federal do Amapá (IFAP), campus Macapá, Colegiado de Física, argemiro.bastos@ifap.edu.br
- 2 Instituto Federal do Amapá (IFAP), campus Macapá, Colegiado de Física, cassio.santos@ifap.edu.br
- 3 Instituto Federal do Amapá (IFAP), campus Macapá, Colegiado de Física, elys.mendes@ifap.edu.br
- Instituto Federal do Amapá (IFAP), campus Macapá, Colegiado de Física,
- 4 emanuel.sousa@ifap.edu.br
## Resumo
Este estudo avalia o desempenho do ChatGPT na resolução de questões de Física do Exame Nacional do Ensino Médio (ENEM) 2023, com o objetivo de identificar suas capacidades e limitações. Utilizando prompts específicos, o ChatGPT foi aplicado a questões teóricas selecionadas, sem a presença de figuras ou equações complexas. A metodologia incluiu a análise dos distratores e a reescrita de algumas questões para melhorar sua clareza e coerência. Os resultados mostraram que o ChatGPT teve um bom desempenho na maioria das questões, mas apresentou dificuldades em tópicos como ondulatória e magnetismo, revelando falhas em procedimentos teóricos. A comparação entre as versões originais e modificadas das questões demonstrou variações significativas nas respostas. Conclui-se que o ChatGPT pode ser uma ferramenta útil no apoio ao ensino de Física, mas não substitui o papel do professor na mediação das teorias científicas. O estudo também discute as implicações éticas do uso da Inteligência Artificial no contexto educacional.
Palavras-chave : Inteligência Artificial na Educação, Ensino de Física, ChatGPT
## 1. Introdução
A Inteligência Artificial (IA) tem causado mudanças significativas na educação, especialmente com o uso de modelos de linguagem natural, como o ChatGPT, na resolução de problemas de Física. Essas ferramentas têm o potencial de transformar o ensino e a aprendizagem, mas é crucial avaliar suas capacidades e limitações, sobretudo em exames como o ENEM, que exigem a aplicação prática de teorias físicas.
Pesquisas recentes têm explorado o impacto da IA na educação. Fuchs (2023) destaca os desafios e oportunidades no ensino superior, enfatizando preocupações com a precisão das respostas e o risco de dependência excessiva dos alunos. Yu (2023) discute a controvérsia sobre o uso do ChatGPT em ambientes acadêmicos, questionando se deve ser banido ou integrado ao ensino. Medeiros et al. (2015) oferecem uma base teórica para validar o conteúdo gerado pela IA, essencial para garantir sua eficácia. Albuquerque e Rodrigues das Dores (2023) analisam o uso
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
20 a 24 de janeiro de 2025 - Niterói - RJ
da IA no ensino de Física, sublinhando a necessidade de uma sólida fundamentação teórica para assegurar a qualidade do aprendizado.
## 2. Metodologia
## 2.1. Coleta de dados
Foram selecionadas 12 questões de Física do ENEM 2023, contidas no caderno azul, para compor o corpus de análise. Essas questões foram escolhidas de forma representativa, abrangendo diferentes áreas da física e níveis de dificuldade. O critério de seleção se pautou na relevância das questões para avaliar a compreensão dos conceitos fundamentais da disciplina, conforme preconizado pela Base Nacional Comum Curricular (Brasil, 2018).
Para embasar esta etapa, a BNCC afirma que o ensino de física deve desenvolver a compreensão de conceitos fundamentais e a capacidade de aplicá-los em diferentes situações, promovendo a contextualização e a interdisciplinaridade (BNCC, 2017). Além disso, foi realizado um pré-processamento das questões para adaptá-las ao formato de entrada aceito pelo ChatGPT 3.5 1 , garantindo que o modelo possa interpretar adequadamente os enunciados e gerar respostas precisas. Assim, itens que contém gráficos não foram abordadas pois estão fora do escopo da versão utilizada. Apesar de haver uma versão mais robusta, a versão 3.5 foi utilizada por ser gratuita e acessível a qualquer usuário.
## 2.2. Resolução pelo ChatGPT
A segunda etapa de análise consistiu na utilização do ChatGPT 3.5 para resolver as questões selecionadas. Para garantir a qualidade e a confiabilidade das respostas geradas pelo modelo, foram formulados prompts que instruíram o ChatGPT a apresentar um contexto inicial necessário para compreender o tema abordado em cada item, e indicasse a alternativa que melhor respondesse à questão de Física. Os prompts foram escritos para estimular a produção de respostas relevantes e precisas. Nesta etapa foram escritos dois prompts:
- 1º) {atue como um experiente professor de física. Comente o seguinte item, explicando o contexto científico e os temas de física relacionados. [colocar o texto do item]}.
Este prompt objetivou solicitar uma análise crítica do item de Física, incentivando o modelo a fornecer uma explicação detalhada do contexto científico envolvido e dos temas relacionados.
- 2º) {considerando o item acima, identifique dentre as alternativas abaixo aquela que melhor explica [colocar o enunciado]. Comente a pertinência da explicação de cada alternativa}.
Este prompt objetivou direcionar o modelo para identificar e avaliar as alternativas apresentadas no item. A solicitação de comentários sobre a pertinência de cada explicação demonstra um esforço para garantir que o modelo avalie criticamente as opções fornecidas. O objetivo desta etapa é avaliar a capacidade do modelo em compreender e responder corretamente questões de física do ENEM. Serão
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
quantificados os sucessos e insucessos do GPT na identificação correta do gabarito para cada item.
## 2.3. Construção de versão modificada dos itens avaliados
Independente do sucesso ou insucesso na etapa anterior, foi solicitado ao ChatGPT que, com base no tema, nível de dificuldade e tipo de item (múltipla escolha), sugerisse uma versão modificada para os itens originais. O objetivo desta etapa foi testar a capacidade do ChatGPT em criar questões semelhantes ou aprimoradas. Para isso, foi escrito o seguinte prompt :
3º) {atue como um experiente professor de física em nível de doutorado. Proponha um item de múltipla escolha, no nível do Exame Nacional do Ensino Médio (ENEM), com o mesmo nível de dificuldade do item anterior, que aborde o contexto científico para [colocar o tema da questão]. A questão deverá apresentar 5 alternativas (distratores), sendo apenas uma verdadeira, para a explicação científica de tal procedimento. Comente a pertinência da explicação de cada alternativa}.
Utilizando as respostas geradas pelo ChatGPT, foram construídas versões modificadas das questões. Nessa etapa, foram introduzidas variações nos enunciados e nos dados apresentados, mantendo a essência conceitual das questões originais. O objetivo foi explorar a capacidade do ChatGPT em criar questões semelhantes ou aprimoradas, promovendo a diversificação dos itens de avaliação.
## 2.4. Comparação entre itens originais e modificados
A quarta etapa envolveu a comparação entre as versões original e modificada dos itens, destacando diferenças e pontos de convergência. O prompt escrito para esta etapa considerou aspectos como coerência científica, uso de distratores, indicação de resposta correta, uso gramatical correto e ocorrência de paralelismo entre o enunciado e as alternativas. Além disso, foi verificado se as respostas geradas pelo ChatGPT para as versões modificadas das questões permaneceram consistentes com os gabaritos oficiais do ENEM, garantindo a confiabilidade dos resultados. Foi utilizado o seguinte prompt :
4º) {atue como um experiente professor de física em nível de doutorado, que deve avaliar a qualidade técnica de uma questão de múltipla escolha, no nível do Exame Nacional do Ensino Médio (ENEM). Avalie as duas propostas seguintes quanto à coerência científica, uso de distratores, indicação de resposta correta, uso gramatical correto, ocorrência de paralelismo entre o enunciado e as alternativas. Ao final, forneça um quadro quantitativo, a partir dos critérios apontados, atribuindo uma nota entre 0 e 10 para cada critério e a nota geral para cada proposta}.
A solicitação de uma nota quantitativa para cada critério permite uma avaliação objetiva da qualidade das questões, garantindo uma análise abrangente e sistemática. Todos os critérios de avaliação terão o mesmo peso, garantindo uma análise equilibrada. A análise comparativa será fundamentada nos critérios de validade, fidedignidade e equivalência, conforme preconizado por Pasquali (2013), visando assegurar a confiabilidade dos resultados obtidos.
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
## 3. Resultados e discussão
A evolução das ferramentas de IA, como o ChatGPT, tem potencial para melhorar o ensino de Física, especialmente em contextos em que a compreensão teórica é essencial. No entanto, a aplicação dessas tecnologias deve ser feita de forma criteriosa, considerando suas limitações.
O ENEM é um dos principais instrumentos de avaliação educacional no Brasil, e suas questões de Física exigem dos alunos conhecimento teórico e capacidade de aplicar esses conhecimentos em situações práticas. O ChatGPT, apesar de suas habilidades, teve dificuldades em áreas como ondulatória e magnetismo, onde a aplicação teórica é mais complexa.
- O Quadro 01 apresenta uma análise comparativa das questões originais e modificadas, destacando as notas atribuídas pelo ChatGPT. As diferenças e pontos de convergência entre as versões foram analisados, revelando a eficácia da IA em melhorar a clareza e coerência das questões, mas também evidenciando suas limitações teóricas.
Quadro 01: Síntese da avaliação do desempenho do ChatGPT quanto às questões de Física do ENEM 2023.
Fonte: Autores, 2024.
## Exemplo de uma questão avaliada pelo GPT.
Questão 112
1º) Atue como um experiente professor de física. Comente a seguinte questão, explicando o contexto científico e os temas de física relacionados. Informações digitais - dados - são gravadas em discos ópticos, como CD e DVD, na forma de cavidades microscópicas. A gravação e a leitura óptica dessas informações são realizadas por um laser (fonte de luz monocromática). Quanto menores as dimensões dessas cavidades, mais dados são armazenados na mesma área do disco. O fator limitante para a leitura de dados é o espalhamento da luz pelo efeito de difração, fenômeno que ocorre quando a luz atravessa um obstáculo com dimensões da ordem de seu comprimento de onda. Essa limitação motivou o desenvolvimento
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
de lasers com emissão em menores comprimentos de onda, possibilitando armazenar e ler dados em cavidades cada vez menores.
Essa questão aborda um conceito fundamental em física relacionado à óptica e ao armazenamento de dados em dispositivos como CDs e DVDs. Para entender melhor o contexto, vamos analisar os principais temas científicos envolvidos:
- 1. Armazenamento de Dados em Discos Ópticos: Gravação e Leitura: Os CDs, DVDs e Blu-rays armazenam dados na forma de pequenas cavidades, chamadas de "pits", que são gravadas na superfície do disco. Entre essas cavidades, existem áreas planas chamadas de "lands". Quando o disco é lido, um feixe de laser (uma fonte de luz monocromática, ou seja, de uma única cor) é direcionado para a superfície do disco. O laser é refletido de forma diferente pelas cavidades e pelas áreas planas, permitindo a leitura dos dados armazenados. Capacidade de Armazenamento: Quanto menores as cavidades (pits), mais dados podem ser armazenados em uma mesma área do disco. Isso se deve ao fato de que a densidade de informação é diretamente proporcional ao número de cavidades que podem ser gravadas em uma determinada área.
- 2. Difração da Luz: - Fenômeno de Difração: A difração ocorre quando uma onda, como a luz, encontra um obstáculo ou passa por uma abertura que tem dimensões comparáveis ao seu comprimento de onda. Esse fenômeno faz com que a luz se espalhe ao passar pelo obstáculo, criando padrões de interferência que podem dificultar a leitura precisa das informações. - Limitação do Comprimento de Onda: A capacidade de um sistema de leitura óptica (como o laser em um leitor de CD ou DVD) para distinguir entre cavidades adjacentes é limitada pela difração. Se as cavidades forem muito pequenas em relação ao comprimento de onda da luz do laser, o espalhamento causado pela difração pode impedir a leitura precisa dos dados.
- 3. Desenvolvimento de Lasers com Menores Comprimentos de Onda: - Evolução Tecnológica: Para superar a limitação imposta pela difração, foi necessário desenvolver lasers que operassem com luz de menor comprimento de onda. Isso porque, quanto menor o comprimento de onda da luz, menor é a área afetada pelo fenômeno de difração, permitindo a leitura de cavidades menores e, consequentemente, o armazenamento de mais dados no disco. - Exemplo Prático: O Blu-ray é um exemplo de tecnologia que utiliza um laser com comprimento de onda menor (azul/violeta) em comparação aos lasers usados em CDs (vermelho) e DVDs. Essa redução no comprimento de onda permite uma maior densidade de armazenamento, possibilitando que mais dados sejam gravados em um disco Blu-ray do que em um CD ou DVD.
- 4. Implicações Práticas e Futuras: - Limites Físicos: Mesmo com lasers de comprimentos de onda menores, há um limite físico para a redução das dimensões das cavidades, que é determinado pela própria natureza da luz e pelos materiais utilizados na fabricação dos discos. - Inovações Futuras: Tecnologias futuras podem buscar alternativas como o uso de feixes de elétrons ou outras partículas subatômicas para leitura e gravação de dados, contornando as limitações impostas pela óptica tradicional.
- 2º) Considerando a questão acima, identifique dentre as alternativas abaixo aquela que melhor explica em qual região espectral se situa o comprimento de onda do laser que otimiza o armazenamento e a leitura de dados em discos de uma mesma área? Comente a pertinência da explicação de cada alternativa.
- A Violeta.
- B Azul.
- C Verde.
- D Vermelho.
- E Infravermelho.
Vamos analisar cada uma das alternativas à luz da questão discutida sobre a otimização do armazenamento e leitura de dados em discos ópticos:
- A. Violeta. Comentário: Lasers na região do espectro violeta têm comprimentos de onda menores, geralmente em torno de 400 nanômetros (nm). Essa é a região utilizada na tecnologia Blu-ray, que permite armazenar e ler uma quantidade muito maior de dados em comparação com CDs (vermelho) e DVDs (vermelho-alaranjado), graças à menor difração associada ao comprimento de onda reduzido. Pertinência: Alta. Esta é a alternativa mais correta, pois o uso de lasers violeta está diretamente relacionado à otimização do armazenamento em discos ópticos modernos.
- B. Azul. Comentário: Lasers azuis têm comprimentos de onda um pouco maiores que os lasers violetas, tipicamente em torno de 450 nm. Esta tecnologia também está associada ao Blu-ray e, apesar de ser um pouco menos eficiente que o violeta, ainda proporciona uma excelente densidade de armazenamento. Pertinência: Alta. Embora ligeiramente menos eficaz que o violeta, o laser azul é amplamente utilizado em discos ópticos como o Blu-ray, otimizando a leitura e gravação de dados.
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
- C. Verde. Comentário: Lasers verdes possuem comprimentos de onda na faixa de 500-550 nm, que são maiores que os do azul e violeta. Esses lasers, embora possam ser utilizados em algumas aplicações ópticas, não são tão eficazes para a leitura de dados em alta densidade devido à maior difração, que ocorre com o aumento do comprimento de onda. Pertinência: Moderada. Embora tenha um comprimento de onda menor que o vermelho, o verde ainda não é ideal para otimizar o armazenamento em discos ópticos quando comparado com o azul ou o violeta.
- D. Vermelho. Comentário: Lasers vermelhos têm comprimentos de onda na faixa de 620-750 nm. São utilizados em CDs e DVDs, mas apresentam maior difração em comparação aos lasers azuis e violetas, limitando a densidade de armazenamento. Pertinência: Baixa. Enquanto os lasers vermelhos foram um avanço para a época dos CDs e DVDs, hoje em dia não são a melhor escolha para maximizar a densidade de armazenamento devido ao seu comprimento de onda maior.
- E. Infravermelho. Comentário: O infravermelho possui comprimentos de onda ainda maiores, acima de 750 nm. Lasers infravermelhos não são eficazes para a leitura de dados em alta densidade, pois a difração tornase ainda mais significativa com o aumento do comprimento de onda. Pertinência: Muito baixa. Inadequado para a leitura de dados em alta densidade, já que a difração seria excessiva, tornando a leitura de cavidades menores praticamente inviável.
Conclusão: A melhor alternativa que explica a região espectral do laser que otimiza o armazenamento e leitura de dados em discos ópticos é A. Violeta. Esta escolha se baseia no menor comprimento de onda, que reduz a difração e permite uma maior densidade de armazenamento, como observado na tecnologia Bluray. A alternativa B. Azul também é bastante pertinente, sendo que o laser azul é frequentemente usado em conjunto com o violeta em tecnologias avançadas de discos ópticos.
- 3º) Atue como um experiente professor de física em nível de doutorado. Proponha uma questão de múltipla escolha, no nível do Exame Nacional do Ensino Médio (ENEM), que aborde o contexto científico para 'Informações digitais - dados - são gravadas em discos ópticos, como CD e DVD, na forma de cavidades microscópicas. A gravação e a leitura óptica dessas informações são realizadas por um laser (fonte de luz monocromática). Quanto menores as dimensões dessas cavidades, mais dados são armazenados na mesma área do disco. O fator limitante para a leitura de dados é o espalhamento da luz pelo efeito de difração, fenômeno que ocorre quando a luz atravessa um obstáculo com dimensões da ordem de seu comprimento de onda'. A questão deverá apresentar 5 alternativas (distratores), sendo apenas uma verdadeira, para a explicação científica de tal procedimento. Comente a pertinência da explicação de cada alternativa.
- O armazenamento de dados em discos ópticos, como CDs e DVDs, é baseado na gravação de cavidades microscópicas (pits) na superfície do disco. A leitura desses dados é realizada por um laser, que emite uma luz monocromática. A eficiência do armazenamento e da leitura depende das dimensões das cavidades e do fenômeno da difração, que limita a capacidade de leitura quando as cavidades são menores que o comprimento de onda da luz utilizada. Qual das alternativas abaixo melhor explica a relação entre o comprimento de onda do laser e a capacidade de armazenamento de dados em discos ópticos?
- A) A redução do comprimento de onda do laser permite a leitura de cavidades menores, o que aumenta a capacidade de armazenamento de dados em discos ópticos.
- B) A difração da luz é eliminada quando se utiliza um laser de comprimento de onda maior, o que facilita a leitura dos dados em discos ópticos.
- C) A leitura de dados em discos ópticos é independente do comprimento de onda da luz do laser, desde que o feixe seja suficientemente intenso.
- D) A eficiência do armazenamento em discos ópticos aumenta com o aumento do comprimento de onda do laser, pois a luz se difrata menos.
- E) A capacidade de armazenamento de dados em discos ópticos é maximizada quando se utiliza um laser que opera na região do infravermelho, onde a difração é mínima.
## Comentário sobre as alternativas:
- A) A redução do comprimento de onda do laser permite a leitura de cavidades menores, o que aumenta a capacidade de armazenamento de dados em discos ópticos. Esta alternativa é correta. A relação entre o comprimento de onda do laser e a capacidade de armazenamento de dados é direta: lasers com menor comprimento de onda, como os utilizados em tecnologias Blu-ray, permitem a gravação e leitura de cavidades menores, aumentando a densidade de dados que podem ser armazenados no disco.
- B) A difração da luz é eliminada quando se utiliza um laser de comprimento de onda maior, o que facilita a leitura dos dados em discos ópticos. Esta alternativa é incorreta. Na verdade, a difração aumenta com o comprimento de onda. Usar um laser com comprimento de onda maior resultaria em maior espalhamento da
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
luz, dificultando a leitura de cavidades pequenas e, consequentemente, diminuindo a eficiência do armazenamento.
- C) A leitura de dados em discos ópticos é independente do comprimento de onda da luz do laser, desde que o feixe seja suficientemente intenso. Esta alternativa é incorreta. A leitura de dados depende significativamente do comprimento de onda do laser, pois a capacidade de distinguir entre cavidades adjacentes está relacionada à difração, que é influenciada pelo comprimento de onda. A intensidade do feixe não pode compensar essa limitação.
- D) A eficiência do armazenamento em discos ópticos aumenta com o aumento do comprimento de onda do laser, pois a luz se difrata menos. Esta alternativa é incorreta. A eficiência de armazenamento diminui com o aumento do comprimento de onda, porque a difração da luz aumenta, tornando mais difícil ler cavidades pequenas.
- E) A capacidade de armazenamento de dados em discos ópticos é maximizada quando se utiliza um laser que opera na região do infravermelho, onde a difração é mínima. Esta alternativa é incorreta. Lasers infravermelhos têm um comprimento de onda maior do que os lasers visíveis, o que na verdade aumenta a difração. Isso faz com que a capacidade de distinguir cavidades pequenas diminua, reduzindo a capacidade de armazenamento.
- 4º) Atue como um experiente professor de física em nível de doutorado, que deve avaliar a qualidade técnica de uma questão de múltipla escolha, no nível do Exame Nacional do Ensino Médio (ENEM). Avalie as duas propostas seguintes quanto à coerência científica, uso de distratores, indicação de resposta correta, uso gramatical correto, ocorrência de paralelismo entre o enunciado e as alternativas. Ao final, forneça um quadro quantitativo, a partir dos critérios apontados, atribuindo uma nota entre 0 e 10 para cada critério e a nota geral para cada proposta.
## Avaliação das Propostas de Questões (Quadro 02).
Quadro 02: Avaliação do ChatGPT quanto às propostas original e modificada das questões de Física do ENEM 2023.
Fonte: Autores. 2024
Nossa avaliação considerou a pertinência das soluções fornecidas, e a adequação pedagógica, isto é, a forma como o ChatGPT abordou os conceitos físicos,
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
sua capacidade de contextualizar os problemas e de promover uma compreensão crítica dos fenômenos, como preconiza a BNCC. Para sustentar nossas afirmações, revisamos o desempenho do ChatGPT à luz dos descritores da BNCC para o ensino de Física, especialmente os que tratam da aplicação dos princípios científicos em problemas do cotidiano e da análise crítica de tecnologias e inovações.
Os critérios adotados para essa análise foram baseados na correspondência entre as competências gerais da BNCC e as respostas geradas pelo ChatGPT. Mais especificamente, avaliamos a capacidade do modelo em: 1. Aplicar conceitos fundamentais de Física para explicar fenômenos naturais e tecnológicos (competência 6); 2. Promover a reflexão crítica sobre as relações entre ciência, tecnologia, sociedade e meio ambiente (competência 7); 3. Encorajar o pensamento analítico ao propor soluções para problemas com base em princípios físicos.
Embora o ChatGPT tenha demonstrado um bom desempenho em questões que requerem aplicação direta de fórmulas e conceitos, identificamos limitações em perguntas que exigiam uma compreensão mais profunda e crítica dos princípios físicos subjacentes, especialmente aquelas que pediam uma contextualização ampla ou análise de implicações sociais e tecnológicas, o que foi um ponto importante a ser discutido no artigo.
## 4. Conclusão
O ChatGPT, como ferramenta de apoio, oferece oportunidades significativas para o ensino de Física, especialmente na reformulação de questões de avaliação. No entanto, suas limitações, particularmente em áreas teóricas complexas, reforçam a necessidade da presença ativa do professor para guiar o processo de aprendizagem. Aspectos éticos relacionados ao uso da IA também devem ser considerados, garantindo que essas ferramentas sejam utilizadas como complementos e não substitutos do ensino tradicional.
## Referências
ALBUQUERQUE, J. C. M.; RODRIGUES DAS DORES, J. L. Uso da Inteligência Artificial no Ensino de Física: Potencialidades e Desafios. Revista Caminhos da Educação: diálogos, culturas e diversidades , v. 5, n. 3, p. 01-14, 2023. DOI: 10.26694/caedu.v5i3.4657.
BRASIL. Ministério da Educação. Base Nacional Comum Curricular . Brasília: MEC, 2018.
FUCHS, K. Exploring the opportunities and challenges of NLP models in higher education: is Chat GPT a blessing or a curse? Front. Educ ., v. 8, p. 1166682, 2023. DOI: 10.3389/feduc.2023.1166682.
MEDEIROS, R. K. S.; FERREIRA JÚNIOR, M. A.; PINTO, D. P. S. R.; VITOR, A. F.; SANTOS, V. E. P.; BARICHELLO, E. Modelo de validação de conteúdo de Pasquali nas pesquisas em Enfermagem. Revista de Enfermagem , v. 4, n. 4, p. 127-135, 2015.
YU, H. Reflection on whether Chat GPT should be banned by academia from the perspective of education and teaching. Front. Psychol ., v. 14, p. 1181712, 2023. DOI: 10.3389/fpsyg.2023.1181712.
\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_\_
Texto extraído automaticamente do PDF: podem existir erros de conversão, especialmente em fórmulas, tabelas e figuras.