Transcript universidade federal fluminense oficina de

UNIVERSIDADE FEDERAL FLUMINENSE
OFICINA DE TRABALHO
ELABORAÇÃO DE PROVAS ESCRITAS
QUESTÕES OBJETIVAS
Marcia Memére
Rio de Janeiro, janeiro de 2013
Sixto Martínez fez o serviço militar num quartel de
Sevilha. No meio do pátio desse quartel havia um
banquinho. Junto ao banquinho, um soldado montava
guarda. Ninguém sabia porque se montava guarda para o
banquinho. A guarda era feita porque sim, noite e dia,
todas as noites, todos os dias, e de geração em geração os
oficiais transmitiam a ordem e os soldados obedeciam.
Ninguém nunca questionou, ninguém nunca perguntou.
Assim era feito, e sempre tinha sido feito.
E assim continuou sendo feito até que alguém, não sei
qual general ou coronel, quis conhecer a ordem original.
Foi preciso revirar os arquivos a fundo. E depois de muito
cavoucar, soube-se. Fazia trinta e um anos, dois meses e
quatro dias, que um oficial tinha mandado montar guarda
junto ao banquinho, que fora recém-pintado, para que
ninguém sentasse na tinta fresca”.
Eduardo Galeano
PARA INÍCIO DE CONVERSA...
• A avaliação não se dá nem se dará num
vazio conceitual, mas sim
dimensionada por um modelo teórico
de mundo e de educação, traduzido em
prática pedagógica.
• Os estudos mostram que a avaliação é
a prática pedagógica que menos
motiva os professores e mais os
aborrece. Ao mesmo tempo, para os
alunos, a avaliação é a atividade mais
temida e menos gratificante.
• Elaborar o Planejamento de uma
Avaliação é uma atividade intrínseca à
ação pedagógica. Embora presente em
todas as instituições escolares, não se
realiza do mesmo modo e nem com as
mesmas finalidades.
• A finalidade de cada Planejamento da
Avaliação está vinculada ao projeto de
Educação no qual se inscreve,
orientador de toda prática pedagógica.
• O modo e os instrumentos utilizados estão
fundamentados em valores, concepções de
educação, de sociedade e de sujeito. São
essas concepções que regem o fazer
pedagógico e que lhe dão sentido.
• É preciso, então, pensar primeiro como os
educadores pensam a Educação, a sociedade
e os sujeitos antes de mudar metodologias,
instrumentos e registros de trabalho .
Reconstruir práticas pedagógicas sem discutir o
significado desse processo é como preparar as
malas sem saber o destino da viagem.
Função do Planejamento da
Avaliação
Tornar a ação:
•
•
•
•
•
•
•
Clara
Precisa
Orgânica
Direcionada
Transformadora
Eficiente
Eficaz
AVALIAÇÃO EDUCACIONAL
Concepção de avaliação


Concepção de sociedade, homem, conhecimento,
processo de conhecimento, produção de
conhecimento e educação
____________________________________
Avaliação educacional
Procedimentos: adequados e consistentes


Projeto pedagógico
MODELOS EDUCACIONAIS E AVALIAÇÃO
Modelos educacionais
(visão de mundo subjacente)
   
Projeto Político Pedagógico: Paradigmas de
ensino – Currículo – Avaliação educacional:
● Perspectiva tradicional
● Perspectiva crítica
AVALIAR X MEDIR
FATORES ASSOCIADOS AO
DESEMPENHO DOS ALUNOS
Variáveis (fatores associados) que podem ter relação
com o desempenho (aprendizagem) do aluno:
●
●
●
●
●
●
●
●
●
Condições sócio-econômicas e culturais (aluno)
Hábitos de leitura e estudo
Tipos de aprendizagem
Clima organizacional
Perfil dos professores
Proposta pedagógica
Condições da escola
Prática docente
Gestão
AVALIAÇÃO EDUCACIONAL – CONCEPÇÃO
Concepção de sociedade, homem,
conhecimento, processo e produção
de conhecimento e educação

Concepção
de
avaliação
Processo, contínuo e sistemático, de descrição e
julgamento de mérito e valor, e visa a:
● determinar se os objetivos foram alcançados,
● identificar problemas, propor alternativas de ação
e correção de rumos, e
● subsidiar o processo de tomada de decisão para
o desenvolvimento e aperfeiçoamento do
processo pedagógico.
ABRANGÊNCIA DA AVALIAÇÃO
A avaliação não se restringe a aspectos metodológicos e
técnicos. Tem relação com múltiplos fatores de ordem
ética, epistemológica, social e política, e envolve:
AVALIAÇÃO ESCOLAR
Processo de aprendizagem dos alunos
AVALIAÇÃO INSTITUCIONAL
Desenvolvimento de propostas educacionais
AVALIAÇÃO DE SISTEMA
Qualidade do ensino: nacional, estadual,
municipal e institucional
AVALIAÇÃO: PLANEJAMENTO
Proposta
Institucional
(IES: PDI)
PPP (Curso)
Currículo
SISTEMA DE AVALIAÇÃO
(Concepção de Avaliação)
Objetivos
Gerais do Curso
Objetivos
Específicos do Curso
AVALIAÇÃO: PLANEJAMENTO
OBJETIVOS DO
CURSO
OBJETIVOS DA
DISCIPLINA
TÉCNICAS E
INSTRUMENTOS
(Concepção de Avaliação)
EXPERIÊNCIAS DE
APRENDIZAGEM
(Currículo em Ação)
INTERPRETAÇÃO
DE RESULTADOS
AVALIAÇÃO: PLANEJAMENTO
PLANEJAMENTO DA PROVA – AVALIAÇÃO ESCOLAR
OBJETIVOS DA AVALIAÇÃO
PROJETO POLÍTICO PEDAGÓGICO DA
INSTITUIÇÃO
OBJETIVOS GERAIS DE ENSINO
OBJETIVOS ESPECÍFICOS DE ENSINO
EXPERIÊNCIAS DE APRENDIZAGEM
TABELA DE ESPECIFICAÇÃO
(Habilidades/Objetivos e Conteúdos)
TÉCNICAS E INSTRUMENTOS DE AVALIAÇÃO
Técnicas e instrumentos  compatíveis com o nível de
ensino e o processo de ensino-aprendizagem
Abrangência (não restringir a provas)
 Prova escrita  Questões discursivas
 Questões objetivas
 Observação
 Entrevista
 Portfólio
 Trabalho escrito (pesquisa bibliográfica,
relatório, projeto etc.)
 Auto-avaliação
CARACTERÍSTICAS DA PROVA ESCRITA
 Qualidade técnica
• Fidedignidade
• Validade de conteúdo
• Exercício significativo e agradável para o
aluno
• Texto orgânico
• Exequibilidade no tempo disponível
CARACTERÍSTICAS DA PROVA ESCRITA
 Aspectos formais
• Redação: regras de ortografia, gramática e
sintaxe da norma padrão
• Instruções claras e precisas
• Disposição adequada das questões
• Apresentação padronizada das questões
• Apresentação correta e disposição adequada de textos, figuras, gráficos, tabelas, etc.
• Legibilidade
CARACTERÍSTICAS DAS QUESTÕES
a) Relevância – Diretamente relacionado ao
objetivo.
b) Especificidade
e
propriedade
do
conteúdo – Conhecimento tratado com
precisão técnica e científica.
c) Objetividade – elementos suficientes para
responder
d) Originalidade – inédita, não copiada de
outras situações.
e) Abordagem interdisciplinar – estabelece
relações.
CARACTERÍSTICAS DAS QUESTÕES
f) Contextualização – dados que conferem
sentido ao enunciado de modo pertinente
e necessário.
g) Abordagem universal e do cotidiano –
emprego de fatos, terminologias e
situações de uso indiscutível na área
profissional.
h) Transigência quanto às relações étnicoculturais – ausência de afirmações,
situações, exemplos e palavras que
expressem discriminação/preconceito de
gênero, etnia, religião, profissão.
CARACTERÍSTICAS DAS QUESTÕES
Redação clara e concisa – precisão e
vocabulário adequado ao conteúdo.
j) Uso apropriado de tabelas, fómulas,
figuras, gráficos, textos, etc. – dar
sentido ao enunciado, com referências
precisas.
k) Nível de dificuldade adequado – grau de
complexidade adequado aos objetivos da
avaliação e ao desenvolvimento do aluno.
i)
QUESTÕES – CUIDADOS TÉCNICOS GERAIS
As questões das provas devem ser construídas
conforme recomendações técnicas gerais – para
elaboração de questões – e específicas de cada
formato: múltipla escolha ou de resposta
construída.
1. Concepção da questão
a) Avaliar construção e produção de conhecimento.
b) Avaliar objetivos e conteúdos trabalhados nas
situações de ensino.
c) Adequar ao nível de ensino, disciplina e período.
QUESTÕES – CUIDADOS TÉCNICOS GERAIS
2. Construção da questão
Enfocar uma situação-problema ou uma situação a ser
analisada.
Foco específico claro: relação entre o problema e a
habilidade/objetivo e o conteúdo a serem avaliados.
b) Ser independente de outra questão.
c) Utilizar fontes primárias ou bibliografia de referência.
d) Verificar se uma questão não contém elementos que
respondem outra(s).
e) Explorar textos, figuras, mapa, tabela etc, de modo
conveniente, válido, adequado.
QUESTÕES – CUIDADOS TÉCNICOS GERAIS
3. Redação da questão
a) Usar linguagem clara e direta.
b) Usar linguagem apropriada ao nível de ensino.
c) Adotar termos impessoais.
d) Pontuar de acordo com as normas.
4. Enunciado
a) Deve ser claro e objetivo e estabelecer relação com
as opções de resposta.
b) Deve conter apenas dados ou informações
funcionais.
c) Deve conter todas as informações técnicas necessárias: atualizadas, corretas, precisas e indispensáveis.
QUESTÕES – CUIDADOS TÉCNICOS GERAIS
EVITAR
a) Questões optativas
b) Diferentes tipos de questões (múltipla escolha e
resposta construída) numa mesma prova
c) Enunciados que solicitem respostas pessoais
d) Termos ou locuções como em geral, usualmente, às
vezes, comunmente, todo, completamente,
totalmente, geralmente, sempre, nenhum, apenas,
absolutamente, somente, nunca etc.
CUIDADOS TÉCNICOS: CONSTRUÇÃO DA QUESTÃO
e) Dupla negação.
f) Frases idênticas às apresentadas em livros.
g) Redução da questão a teste da capacidade de
memorização do aluno.
ETAPAS DA ELABORAÇÃO DE QUESTÕES
 Uso de textos para questões
• Seleção: objetivos da avaliação e diversidade
• Identificação dos objetivos e conteúdos que
podem avaliar
a) Identificação da operação mental que pressupõe o
objetivo – Taxonomia de objetivos educacionais
Abrangência do objetivo  mais de uma questão 
diferentes níveis de conhecimentos
b) Análise do conteúdo  objetivo
c) Definição do tipo de questão: resposta construída ou
múltipla escolha (definição do formato)
ETAPAS DA ELABORAÇÃO DE QUESTÕES
d) Definição da situação-problema ou problema a ser
trabalhado na questão
e) Construção da questão
• Múltipla escolha: enunciado e alternativas
• Resposta construída: enunciado e chave de
correção
f) Verificação: questão  objetivo/conteúdo
g) Revisão:
• Redação e apresentação da questão
• Gabarito (ME) e chave de correção (RC)
• Questão: algum tempo após a elaboração
QUESTÕES DE
MÚLTIPLA ESCOLHA
QUESTÕES OBJETIVAS e MÚLTIPLA ESCOLHA
QUESTÕES OBJETIVAS
MÚLTIPLA ESCOLHA
Associação
Afirmação incompleta
Lacuna
Asserção-razão
Múltipla escolha
Associação
Proposições Múltiplas
Complementação
múltipla/Resposta múltipla
Ordenação
Interpretação
Resposta curta
Verdadeiro-Falso
Lacuna
Resposta única
AFIRMAÇÃO INCOMPLETA – ENADE/2209 (Tec. Gestão R.H.)
12 No Brasil, o estudo das funções e tarefas de funcionários para
desenho e descrição de cargos vem passando por modificações
importantes desde a década de 1990. Entre estas, destacam-se a
ampliação do espaço ocupacional e a ênfase na entrega
esperada. A explicação para essas mudanças considera que
(A) a flexibilidade e o foco em desenvolvimento contínuo são de
responsabilidade das pessoas.
(B) o desenvolvimento horizontal se torna mais importante do
que o crescimento vertical por cargos.
(C) as formas de organização do trabalho devem prever condições
para o trabalho em equipe.
(D) os cargos devem incluir conhecimentos, habilidades e atitudes
que conduzam ao aprendizado contínuo.
(E) os cargos precisam permitir ajustes para flexibilizar as
funções de acordo com os resultados esperados.
INT / AFIRMAÇÃO INCOMPLETA –
ENEM/2012
11
SOBRADINHO
O homem chega, já desfaz a natureza
Tira gente, põe represa, diz que tudo vai mudar
O São Francisco lá pra cima da Bahia
Diz que dia menos dia vai subir bem devagar
E passo a passo vai cumprindo a profecia do beato que
dizia que o Sertão ia alagar.
SÁ E GUARABYRA. Disco Pirão de peixe com pimenta.
Som Livre, 1977 (adaptado).
O trecho da música faz referência a uma importante
obra na região do rio São Francisco. Uma consequência
socioespacial dessa construção foi
(A) a migração forçada da população ribeirinha.
(B) o rebaixamento do nível do lençol freático local.
(C) a preservação da memória histórica da região.
(D) a ampliação das áreas de clima árido.
(E) a redução das áreas de agricultura irrigada.
RESPOSTA MÚLTIPLA
– ENADE/2009 (Adm.)
11 Cada uma das teorias administrativas surgiu como uma resposta aos
problemas empresariais mais relevantes de sua época.
Sobre as Teorias de Administração, considere as afirmativas a seguir.
I A Teoria da Burocracia de Weber procurou utilizar métodos
quantitativos na busca de soluções para problemas complexos.
IIA Visão Sistêmica da Administração considerou a organização como
um sistema fechado, sem necessidade de interação com o
ambiente, o qual é estável e previsível.
IIIA Escola das Relações Humanas apresentou a existência da
organização informal e das necessidades sociais das pessoas na
organização.
IV- A Administração Científica de Taylor buscou aumentar a eficiência
operacional das empresas por meio da ausência de desperdícios e
da divisão do trabalho.
Está correto APENAS o que se afirma em
(A)
II e IV.
(D) I, III e IV.
(B) III e IV.
(E) II, III e IV.
(C)
I, II e IV.
INTERPRETAÇÃO / AI
– PEDAGOGIA/2011
No processo de leitura dos alunos do Ensino
Fundamental, é importante que eles apreendam
diversos recursos presentes no texto. O professor deve
estar atento ao fato de que os alunos têm muito
contato com outras linguagens, além da linguagem
verbal. Ao combinar o texto verbal e o não verbal, os
alunos devem perceber a função que a linguagem visual
representa em alguns gêneros textuais, como as
tirinhas, as histórias em quadrinhos e as propagandas.
A esse respeito, considere a história em quadrinhos da
Mafalda.
INTERPRETAÇÃO / AI
– PEDAGOGIA/2011
INTERPRETAÇÃO/AI
– PEDAGOGIA/2011
Nessa tirinha, para reforçar a atitude crítica da
personagem Mafalda, o leitor deve perceber a
(A) expressão facial de Mafalda e as letras maiúsculas
no terceiro quadrinho.
(B) informação contida no segundo quadrinho e a
fisionomia feliz de Mafalda.
(C) justificativa de Manolito e o uso do ponto de
exclamação no quarto quadrinho.
(D) oferta de caramelo e a tentativa de Manolito de
justificar seu comportamento.
(E) reação de Mafalda ao receber o presente e a
resposta dada por Manolito no final.
ASSERÇÃO-RAZÃO
– FILOSOFIA/2011
17
Segundo Aristóteles, o conhecimento das causas é superior
ao conhecimento dos fatos.
PORQUE
A ciência para Aristóteles caracteriza-se por ser um saber
contemplativo, enquanto a arte é um saber produtivo.
Analisando-se as afirmações acima, conclui-se que
(A) as duas afirmações são verdadeiras, e a segunda
justifica a primeira.
(B) as duas afirmações são verdadeiras, e a segunda não
justifica a primeira.
(C) a primeira afirmação é verdadeira, e a segunda é falsa.
(D) a primeira afirmação é falsa, e a segunda é verdadeira.
(E) as duas afirmações são falsas
RESPOSTA ÚNICA
– FILOSOFIA/2011
20
Qual é, segundo Immanuel Kant, o caráter positivo de
uma crítica da razão pura?
(A) Trazer à luz os limites do uso puro teórico da razão,
evitando que se reduza a nada seu uso puro prático.
(B) Promover a possibilidade de um conhecimento de
caráter científico da moralidade.
(C) Estabelecer um método puramente racionalista para
as ciências e um método puramente empirista para a
moral.
(D) Acusar a impossibilidade de uma moral metafisicamente
fundada, como pretendiam os filósofos racionalistas
que o antecederam.
(E) Denunciar a falsa pretensão de universalidade das
ciências naturais.
QUESTÃO DE MÚLTIPLA ESCOLHA: FORMATO
 Composição: enunciado e alternativas de respostas
(1 correta  3 distratores)
 Estruturação – 2 tipos:
a) O aluno resolve a situação-problema e
identifica a alternativa que contém a
resposta certa.
b) O aluno analisa cada alternativa de acordo
com o enunciado e identifica a correta.
CUIDADOS TÉCNICOS: ENUNCIADO
1. Deve permitir a antecipação da natureza das
alternativas.
• A leitura do enunciado deve possibilitar
compreensão imediata do objetivo da
questão, independente da leitura de todas
as alternativas.
• Não pode conter dupla negação.
2. Deve ser formulado de maneira positiva.
Evitar empregar termos como EXCETO, NÃO,
INCORRETO e ERRADO.
CUIDADOS TÉCNICOS: ENUNCIADO
3. Deve incluir termos que seriam repetidos nas
alternativas.
4. Não confundir enunciado com instrução, usando
expressões como:
Assinale a alternativa correta,
Qual das alternativas...,
A alternativa que indica... e
outras equivalentes.
CUIDADOS TÉCNICOS: ALTERNATIVAS
1. Devem apresentar a mesma estrutura.
2. Devem abordar conteúdos com homogeneidade.
• Mesma categoria, espécie, abrangência etc.
3. Devem trabalhar conteúdos relevantes.
4. Devem ter precisão quanto ao conteúdo.
• Não devem provocar controvérsias ou dúvida
por desconsiderar variáveis que o problema
envolve.
• Não pode suscitar dúvida quanto à correção
do gabarito (incluir todas as informações
necessárias.
CUIDADOS TÉCNICOS: ALTERNATIVAS
5. Devem ser independentes.
6. Devem ter extensão adequada e equivalente.
• Alternativas longas podem desviar a
atenção do aluno do seu conteúdo real.
7. Devem manter o paralelismo gramatical.
8. Devem ser ordenadas segundo um critério.
9. Devem impedir o acerto por exclusão.
• Distratores plausíveis e bem construídos.
CUIDADOS TÉCNICOS: ALTERNATIVAS
10. Não devem ser do tipo todas as anteriores,
nenhuma das anteriores, todas as respostas acima,
nenhuma das respostas acima ou apenas as
alternativas (b) e a (d) são corretas, são corretas a
(c) e a (e).
11. Não podem ser mutuamente excludentes.
• Não apresentar o mesmo significado ou significados opostos, nem conter umas as outras.
CUIDADOS TÉCNICOS: ALTERNATIVAS
Evitar
a) Alternativas com resposta parcial
• podem penalizar alunos que sabem resolver
o problema
• nem sempre significam respostas
absolutamente erradas
b) Alternativas maliciosas ou enganosas
• não avaliam a habilidade e o conhecimento
pretendidos
• podem induzir o aluno ao erro
• propiciam várias possibilidades de resposta
DISTRATORES
Os distratores são alternativas com aparência de
resposta correta, mas inquestionavelmente incorretas
em relação ao enunciado, embora seu conteúdo deva
ser correto, se considerado independentemente do
problema formulado no enunciado.
Devem atrair os alunos que não possuem a
habilidade requerida na questão ou aqueles que tentam
adivinhar (ou “chutar”) a resposta.
A questão deve ser corretamente respondida
apenas pelos alunos que dominam a
habilidade/objetivo que pretende medir.
CUIDADOS TÉCNICOS: DISTRATORES
Os distratores devem ser respostas plausíveis.
Em relação à alternativa correta, têm semelhança
quanto à ordem de grandeza ou forma de
apresentação, guardam similaridade em relação à
situação/ tempo/ local/ elementos.
Favorecem a plausibilidade dos distratores:
• Emprego de erros comuns entre os alunos.
• Construção tão bem cuidada quanto a do gabarito.
• Uso de possíveis soluções errôneas do problema.
CUIDADOS TÉCNICOS: DISTRATORES
Falhas que comprometem a plausibilidade dos
distratores:
• Erros grosseiros ou absurdos flagrantes.
• Inclusão da palavra não na frase, uso do prefixo in,
ou outros artifícios similares para tornar as respostas
incorretas.
• Abordagem de detalhes irrelevantes, conteúdos
absurdos ou conhecimentos pontuais.
Evitar a construção de distratores que:
• sejam respostas parciais (ex.: etapa da resolução ou
parte da resposta completa).
• funcionam como “ciladas”, usando termos ambíguos
ou capciosos, “pegadinhas” ou armadilhas verbais.
CUIDADOS ESPECÍFICOS: R. MÚLTIPLA
1. A chave deve ser feita de tal forma que as combinações não forneçam pistas da resposta correta;
2. O enunciado deve conter somente uma ideia central
significativa;
3. O enunciado NÃO pode ser “negativo”;
4. As afirmações devem ter estrutura simples e curtas;
5. As afirmações verdadeiras devem ser identificadas
pelos alunos que dominam o que é proposto;
6. As afirmações falsas devem causar dúvida quanto à
sua veracidade para os que não dominam o que é
proposto;
7. Os itens NÃO podem conter elementos que favoreçam o acerto por exclusão.
CUIDADOS ESPECÍFICOS: ASSERÇÃO-RAZÃO
1. As duas proposições devem referir-se ao mesmo
conteúdo específico;
2. As duas proposições devem ser constituídas por
frases com sentido completo;
3. As duas proposições devem ser redigidas de modo
que o aluno possa analisá-las independentemente.
4. Cada uma das duas proposições deve ser
absolutamente verdadeira ou sem dúvida falsa;
5. A relação de causa e consequência pode existir ou
não entre as duas proposições;
6. As alternativas devem ser plausíveis para as
questões em que não existe relação de causa e
consequência entre as proposições.
CONSIDERAÇÕES FINAIS
Uma prova de qualidade, com questões
tecnicamente bem elaboradas, é condição
necessária, mas não suficiente, para os
propósitos da avaliação.
     
As provas devem avaliar a produção de
conhecimento e não a memorização.
ATIVIDADE PRÁTICA
1. Trabalho de grupo
a) Revisar uma questão:
 analisar a correspondência entre questão e
objetivos e conteúdos
 analisar a qualidade técnica
 redefinir objetivos e conteúdos
 fazer ajustes e aprimoramentos técnicos
b) Elaborar uma questão em função de conteúdos e
objetivos definidos.
 Identificar a resposta correta.
 Justificar os distratores.
ATIVIDADE PRÁTICA
2- Exercício coletivo
a) Apresentação da produção de cada grupo.
 Explicitar os objetivos e os conteúdos
 Descrever o processo de construção – desconstrução – re-construção da questão
b) Análise e discussão da produção.
 Observações, comentários e sugestões dos
demais grupos (aprimoramento da questão).
ATIVIDADE PRÁTICA
As questões não apresentadas no exercício
coletivo, por falta de tempo, poderão ser
enviadas para
[email protected]
com os nomes dos professores participantes do
grupo e os respectivos endereços eletrônicos.
Resposta com os comentários por e-mail.