[OFICINA] Avaliação: Análise de Dados

Avaliação: Análise de Dados

Programa Integrado IDE + Estuda360

A proposta é transformar a teoria em um fluxo prático:

RESULTADO → ANÁLISE → DIAGNÓSTICO → INTERVENÇÃO → REAVALIAÇÃO

Isso mantém a lógica apresentada no material do curso, em que a avaliação é tratada como instrumento para produzir informações que orientam decisões pedagógicas.  Programa Integrado - Análise de…

1. Objetivo da oficina

Ao final da oficina, cada professora deverá ser capaz de:

• organizar os resultados de uma avaliação;

• calcular o percentual de acertos por questão;

• identificar questões com maior e menor desempenho;

• relacionar cada questão ao descritor/habilidade avaliada;

• identificar quais habilidades precisam de intervenção;

• transformar os resultados em uma decisão pedagógica;

• elaborar um pequeno plano de ação para a turma;

• definir como verificar posteriormente se a intervenção funcionou.

A ideia central será:

Não vamos analisar a prova para descobrir quem tirou nota alta ou baixa. Vamos analisar a prova para descobrir o que a turma precisa aprender.

---

Apresentação

A avaliação não termina quando a prova é corrigida. Os resultados de uma avaliação podem revelar muito mais do que uma nota: podem indicar quais habilidades estão consolidadas, quais apresentam dificuldades e onde o professor precisa concentrar sua intervenção pedagógica.

Nesta oficina, você será convidado a transformar os resultados de uma avaliação em informações que possam orientar decisões pedagógicas. A proposta é colocar em prática o processo apresentado no curso:

AVALIAR → ORGANIZAR DADOS → ANALISAR → DIAGNOSTICAR → INTERVIR → REAVALIAR

O foco não está em produzir mais números, mas em aprender a utilizar os dados da avaliação para compreender a aprendizagem e planejar ações mais específicas.

Objetivo da oficina

Ao finalizar a oficina, o professor deverá ser capaz de:

• organizar os resultados de uma avaliação;

• calcular o percentual de acertos por questão;

• relacionar questões às habilidades ou descritores avaliados;

• identificar questões que merecem investigação;

• analisar possíveis causas de um baixo desempenho;

• formular um diagnóstico pedagógico;

• elaborar uma intervenção;

• definir como verificar se a intervenção produziu avanço.

Como funciona?

A oficina é online e autoinstrucional, com duração aproximada de 1 hora. O professor deverá acompanhar as orientações, realizar as atividades propostas e utilizar uma avaliação de sua própria turma ou os dados fornecidos pelo curso.

A oficina está organizada em quatro momentos:

1. Organizar os dados

2. Analisar os resultados

3. Planejar a intervenção

4. Definir a reavaliação

Ao final, o professor terá produzido um pequeno Plano de Ação Pedagógica baseado em dados.

MOMENTO 1 — AVALIAÇÃO COMO FONTE DE DADOS

Antes de começar, reflita:

Quando você corrige uma avaliação, o que costuma observar primeiro?

A nota?

A média da turma?

Quem acertou e quem errou?

Nesta oficina, vamos avançar uma etapa.

A pergunta principal será:

O que os resultados dessa avaliação revelam sobre a aprendizagem dos estudantes?

Uma nota apresenta um resultado.

A análise procura compreender o que está por trás desse resultado.

Por isso:

Resultado → Evidência → Interpretação → Decisão pedagógica

MOMENTO 2 — ORGANIZANDO OS DADOS

Agora vamos transformar as respostas dos estudantes em dados que possam ser analisados.

Considere uma turma com 30 estudantes.

Imagine que uma questão tenha apresentado:

• 24 acertos;

• 6 erros.

O cálculo será:

24 ÷ 30 × 100 = 80%

Portanto, a questão apresentou 80% de acertos.

Faça o mesmo com as demais questões da avaliação.

Atividade

Questão	Acertos	Total de alunos	% de acertos
1	27	30	____%
2	24	30	____%
3	21	30	____%
4	18	30	____%
5	15	30	____%
6	12	30	____%
7	9	30	____%
8	6	30	____%

Desafio

Depois de calcular, responda:

Qual questão apresentou o maior percentual de acertos?

Qual questão apresentou o menor percentual de acertos?

Qual questão você investigaria primeiro?

MOMENTO 3 — ANALISANDO O ITEM

Agora começa a parte mais importante da oficina. Encontrar a questão com menor percentual de acertos é apenas o início. Não podemos concluir imediatamente:

“Os alunos não aprenderam.”

Precisamos investigar.

Escolha a questão que apresentou o menor percentual de acertos e responda:

1. O que a questão avaliava?

Habilidade/descritor:

2. Essa habilidade foi ensinada?

3. O comando da questão está claro?

4. O texto-base apresenta informações suficientes?

5. As alternativas apresentam distratores plausíveis?

6. Os estudantes poderiam ter errado por outro motivo?

Por exemplo:

• dificuldade de leitura;

• dificuldade de interpretação;

• desconhecimento do conteúdo;

• falta de atenção ao comando;

• vocabulário;

• complexidade do item;

• habilidade ainda não consolidada.

Pergunta central

O baixo desempenho indica uma dificuldade de aprendizagem, um problema no item ou uma combinação dos dois?

Essa pergunta deve anteceder qualquer decisão de intervenção.

MOMENTO 4 —COMO PRODUZIR QUESTÕES FÁCEIS, MÉDIAS E DIFÍCEIS

Uma avaliação equilibrada não deve ser formada apenas por questões fáceis ou apenas por questões difíceis. A proposta do IDE + Estuda360 é utilizar diferentes níveis de dificuldade para observar diferentes níveis de aprendizagem.

Para uma avaliação com 10 questões, podemos trabalhar com:

3 questões fáceis — 30%

4 questões médias — 40%

3 questões difíceis — 30%

O objetivo não é simplesmente criar questões “mais complicadas” ou “mais fáceis”. O que diferencia os níveis é, principalmente, o nível de raciocínio exigido para chegar à resposta.

1. Questão fácil

A questão fácil verifica se o estudante consegue demonstrar uma aprendizagem mais básica ou diretamente relacionada à habilidade trabalhada.

Pode exigir, por exemplo:

• identificação;

• localização de informação;

• reconhecimento;

• associação;

• compreensão direta;

• aplicação simples de um conhecimento.

Exemplo — 3º ano

Leia:

Ana levou uma maçã para o lanche.

Qual alimento Ana levou para o lanche?

A) Banana.

B) Maçã.

C) Laranja.

D) Uva.

Por que é fácil?

O estudante precisa localizar uma informação explícita no enunciado.

Não há necessidade de estabelecer relações complexas ou realizar inferências.

2. Questão média

A questão média exige que o estudante vá além da localização direta da informação.

Pode envolver:

• aplicação;

• relação entre informações;

• comparação;

• organização;

• compreensão de uma situação;

• identificação de uma informação a partir de pistas.

Exemplo — 4º ano

Leia:

João levou um guarda-chuva para a escola. Durante a manhã, o céu ficou escuro e começou a chover.

Por que João levou um guarda-chuva?

A) Porque estava muito quente.

B) Porque queria brincar com os colegas.

C) Porque provavelmente esperava chuva.

D) Porque precisava proteger o material escolar do sol.

Por que é média?

O estudante precisa relacionar as informações do texto e estabelecer uma relação de causa e consequência. A resposta não está simplesmente apresentada em uma frase.

3. Questão difícil

A questão difícil exige maior articulação de informações e pode envolver:

• inferência;

• análise;

• comparação de informações;

• estabelecimento de relações;

• interpretação;

• identificação de informações implícitas;

• avaliação de uma situação;

• resolução de uma situação-problema mais complexa.

Exemplo — 5º ano

Leia:

Pedro chegou à escola sem o livro que deveria utilizar na aula. Durante a atividade, pediu o livro emprestado a um colega. Ao final da aula, percebeu que havia deixado seu exemplar sobre a mesa de casa.

O que podemos concluir sobre a situação?

A) Pedro não sabia qual livro deveria levar.

B) Pedro esqueceu o livro e precisou encontrar uma alternativa para participar da atividade.

C) Pedro decidiu não levar o livro porque não queria realizar a atividade.

D) Pedro perdeu o livro durante o caminho para a escola.

Por que é difícil?

O estudante precisa articular diferentes informações do texto para chegar a uma conclusão que não está apresentada literalmente.

O que NÃO devemos fazer

Uma questão difícil não é necessariamente uma questão com um texto enorme, palavras difíceis ou um comando complicado. Também não devemos tornar uma questão difícil simplesmente aumentando a quantidade de informações.

A pergunta principal deve ser:

Que tipo de raciocínio o estudante precisa realizar para chegar à resposta?

Esse é o critério que deve orientar a construção dos níveis de dificuldade.

DESAFIO PRÁTICO DO MOMENTO 4

Agora você vai construir três questões para uma mesma habilidade. Escolha uma habilidade ou descritor que você trabalha com sua turma.

Depois produza:

Questão 1 — Fácil

Deve verificar uma aprendizagem mais básica.

Questão 2 — Média

Deve exigir aplicação, relação ou compreensão mais elaborada.

Questão 3 — Difícil

Deve exigir maior articulação, análise ou inferência.

Preencha:

Nível	O que o estudante deverá fazer?	Questão
Fácil	__________________	__________________
Média	__________________	__________________
Difícil	__________________	__________________

MOMENTO 5 — DO DIAGNÓSTICO À INTERVENÇÃO

Um diagnóstico somente ganha sentido quando gera uma ação pedagógica.

Agora responda:

O que será trabalhado?

Qual será o objetivo?

Qual estratégia será utilizada?

Qual atividade será realizada?

Quais estudantes participarão?

Quanto tempo será necessário?

Que evidência você espera observar?

A intervenção pode envolver:

• retomada orientada;

• leitura coletiva;

• atividade em pequenos grupos;

• resolução de questões semelhantes;

• modelagem pelo professor;

• exemplos e contraexemplos;

• atividades graduadas;

• recuperação de uma habilidade específica;

• aplicação da habilidade em novo contexto.

A estratégia escolhida deve responder ao diagnóstico, e não simplesmente ao conteúdo da prova.

MOMENTO 6 — OFICINA PRÁTICA: PRODUÇÃO E ANÁLISE DE QUESTÕES

Atividade em formato de fórum

Nesta etapa, a teoria será transformada em produção.

A atividade será realizada em duas partes.

PARTE 1 — PRODUÇÃO INDIVIDUAL

Cada professor deverá escolher uma habilidade ou descritor trabalhado em sua turma e produzir uma questão objetiva.

O professor deverá escolher um dos três níveis:

Fácil — Média — Difícil

A questão deverá apresentar:

1. Habilidade/descritor

2. Objeto de conhecimento

3. Nível de dificuldade

4. Texto-base, quando necessário

5. Comando

6. Quatro alternativas

7. Gabarito

8. Justificativa do nível de dificuldade

Modelo para publicação no fórum

Habilidade/Descritor:  

Objeto de conhecimento:  

Nível:( ) Fácil( ) Médio( ) Difícil

Questão:

A) ______________________________________________

B) ______________________________________________

C) ______________________________________________

D) ______________________________________________

Gabarito: ______

Por que esta questão pertence a esse nível de dificuldade?

PARTE 2 — ANÁLISE DA QUESTÃO DE UM COLEGA

Depois de publicar sua questão, escolha uma questão publicada por outro professor.

Leia cuidadosamente e faça uma análise.

Sua resposta deverá considerar:

1. A questão está adequada à habilidade proposta?

Explique.

2. O nível de dificuldade está adequado?

A questão realmente exige o raciocínio correspondente ao nível indicado pelo colega?

3. O comando está claro?

O estudante consegue compreender exatamente o que precisa fazer?

4. As alternativas estão bem construídas?

Os distratores são plausíveis?

5. O que você manteria?

6. O que você melhoraria?

MODELO DE COMENTÁRIO NO FÓRUM

Análise da questão do colega

A questão apresenta adequação à habilidade ____________, pois __________________________________________.Considero que o nível __________ está adequado/inadequado porque o estudante precisa __________________________________________.O comando está __________________________________________.As alternativas apresentam __________________________________________.Um aspecto positivo da questão é __________________________________________.Como sugestão de melhoria, eu faria __________________________________________.

CRITÉRIOS DE AVALIAÇÃO DA ATIVIDADE

A atividade do fórum poderá ser avaliada considerando quatro critérios:

Critério	O que será observado
Habilidade	A questão está relacionada à habilidade/descritor indicado?
Nível de dificuldade	O raciocínio exigido corresponde ao nível escolhido?
Qualidade do item	Comando, texto-base e alternativas estão adequados?
Análise do colega	O comentário apresenta justificativa pedagógica e sugestão de melhoria?

Produto final

Ao concluir o fórum, cada professor terá:

1 questão produzida individualmente

1 questão de colega analisada

1 reflexão sobre a construção de itens

Esse formato é mais adequado para a proposta do curso porque faz o professor passar por três posições diferentes:

PROFESSOR QUE PLANEJA

↓

Constrói a questão.

PROFESSOR QUE ANALISA

↓

Examina a qualidade do próprio item.

PROFESSOR QUE APRENDE COM O COLEGA

↓

Analisa e contribui para melhorar outro item.

E isso se conecta diretamente à proposta maior do curso: não apenas analisa

FECHAMENTO

A análise de dados não substitui o olhar do professor.

Ela qualifica esse olhar.

O dado mostra onde investigar.

O professor interpreta o contexto.

O diagnóstico orienta a intervenção.

A reavaliação mostra se a intervenção produziu avanço.

E os novos resultados alimentam uma nova decisão pedagógica.

Avaliar é apenas o começo.

Dados também educam.