ELABORAÇÃO DE QUESTÕES OBJETIVAS

Profas. Maria José Motta Viana e Olga Julieta da Fonseca

Princípio orientador da avaliação acadêmica

Consideração do perfil do egresso em consonância com a missão institucional.

“O professor que avalia sem ter conhecimento do perfil do egresso caminha sem rumo.”

Por que estudar itens de prova?

Por necessidade de:  aprimorar as técnicas de elaboração de questões fechadas para que se tornem de fato avaliadoras de aprendizagem.

 considerar a existência desse tipo de questões em situações reais da vida: concursos, seleções, cursos de treinamento empresariais, provas do ENADE, etc.

Condições para elaboração de itens eficientes

• Criar o referente ou matriz de referência (tópicos estruturantes da formação do aluno elencados em forma de descritores).

• Seguir uma (valores, normas, orientação didático-pedagógica critérios para se chegar aos objetivos da disciplina).

Objetivos

• Desenvolver as habilidades de elaboração e análise de itens de múltipla escolha, considerando a importância das técnicas de elaboração deles para a eficácia da avaliação.

O que cobrar nas questões fechadas?

• Competências cognitivas (modalidade estrutural da inteligência - ações e operações que o sujeito executa para estabelecer relações com e entre objetos, situações, fenômenos, pessoas, para resolver problemas.) • Habilidades (associadas ao saber fazer: a capacidade adquirida.) ação física ou mental que indica

Categorias das competências

Elas se classificam nos seguintes níveis: 1.

básico 2. operacional 3. global

Categorias das competências (cont.)

1.

Nível básico

:

ações que possibilitam a apreensão das características e propriedades de objetos comparáveis e consequente construção de conceitos.

Nesse nível estão as competências de: • identificar, reconhecer, indicar, entre diversos objetos, aquele que corresponde a um conceito ou a uma descrição; • localizar informações, dados, fatos num texto; • descrever objetos, situações, fenômenos; • constatar relações entre objetos, situações (semelhanças e diferenças); • representar objetos, dados, etc., através de gráficos, desenhos, tabelas.

Categorias das competências (cont.)

Exemplo de questão de nível básico

Weber estudou as Industrial o e a organizações surgidas após a Revolução formação do Estado características e tipos de autoridade que eram comuns a ambos. O modelo de poder que chamou-lhe a burocrático, que tem como características e identificou atenção foi a) o mecanicismo e a racionalidade legal.

b) a competência técnica e a dominação carismática.

c) a impessoalidade e o profissionalismo.

d) o excesso de regras e a valorização da hierarquia.

Contra exemplo de questão de nível básico

“`Que é a filosofia?´ perguntava-se Jules Lachelier no decorrer de sua aula inaugural. E, para estupefação de seus jovens alunos, respondia:`- Não sei´!

E toda a cidade de Toulouse zombava do jovem e brilhante filósofo vindo de Paris, que nem sequer sabia o que era a disciplina que estava incumbido de ensinar a seus alunos!” (Huisman e Vergez)

Na verdade, não existe a filosofia como matéria de conhecimento, e, por isso, os

filosofar.

Filosofar filósofos preferem falar em é questionar as verdades já estabelecidas, é colocar em xeque tudo aquilo que seja tido como muito óbvio, muito evidente. Filosofar é pensar sem preconceitos, crenças ou superstições.

Filosofar é pensar por intermédio de conceitos puros, sem estereótipos. “Filosofar é reaprender a ver o mundo” (Merleau Ponty).

É necessário que seja um pensamento lógico, isto é, pautado pela razão.

Com base na leitura do texto acima e em seus conhecimentos, MARQUE a afirmativa que NÃO represente o momento filosófico : a) “Filosofar significa reproduzir, retornar ao conhecido.”!

b) “A essência da filosofia é a procura do saber e não a sua posse.

” c) “Não há filosofia que se possa aprender; só se pode aprender a filosofar.

” d) “Filosofia não é um saber, mas uma reflexão crítica sobre o saber.

”

Categorias das competências (cont.) 2.

de

Nível operacional:

estabelecimento de Atingem o ações que pressupõem relações entre objetos e supõem tomada consciência dos instrumentos e procedimentos utilizados.

nível de compreensão e da explicação.

o Nesse nível estão as competências de: classificar, seriar, ordenar, compor e decompor, fazer antecipações (sobre o resultado de experiências, continuidade de acontecimentos, etc.), calcular (por estimativa), medir, interpretar relacionar (textos, mapas, tabelas, gráficos), justificar, (informações de um texto com outras de outros textos).

Exemplo de questão de nível operacional

Leia os quadrinhos a seguir.

QUINO.

Toda Mafalda.

São Paulo: Martins Fontes, 2003.

Com base na leitura da tira, marque a alternativa que apresenta uma interpretação inadequada dela.

a) o humor é provocado pela falta de sintonia na interlocução entre o que é dito pela professora e o que é deduzido por Mafalda.

b) a tira faz referência aos sistemas capitalista e socialista representados pelo Pentágono e o Kremlin respectivamente.

c) o elemento palavra responsável pela ativação do humor na tira é a “Pentágono” associada a Kremlim.

d) a compreensão da tira é independente do acionamento de conhecimentos prévios por parte do leitor.

Contra exemplo de questão de competência operacional.

Observe o quadro de Rafael “Escola de Atenas” e faça o que se pede:

O quadro de Rafael a) demonstra o pensamento filosófico na Academia, abordando a diversidade do pensamento reflexivo da clássica grega.

época b) aborda a discussão entre o impasse da impossibilidade do conhecimento, afirmando a improbabilidade da discussão filosófica.

c) ressalta o contexto filosófico do início do século XVIII.

d) coloca em cheque o poder do conhecimento grego, abordando complexidades reflexivas e divagações.

3. Nível global

Analisar (com base em valores), aplicar princípios, padrões e (relações já estabelecidas), avaliar, criticar e julgar, explicar causa e efeito, apresentar conclusões, fazer prognósticos, generalizações, suposições, aplicar conhecimentos a situações diferentes.

Exemplo de questão de nível global

Contra-exemplo

Analise as afirmativas seguintes.

Adotar um comportamento empreendedor implica uma mudança de hábitos e de cultura na empresa PORQUE, para sermos empreendedores, precisamos mudar nossos hábitos e adotar novos comportamentos e atitudes.

• Em relação a essas afirmativas, é • as duas são verdadeiras e a segunda justifica a primeira.

• as duas são falsas.

• a primeira é falsa, a segunda é verdadeira, mas não justifica a primeira.

• a primeira é verdadeira, a segunda é falsa e não justifica a primeira.

correto

afirmar que

As habilidades

Querem dizer destreza, aptidão para desenvolver algo. São de 3 níveis: • Procedimentais

-

conjunto de ações ordenadas para se fazer algo.

• Intencionais

-

aquelas dirigidas para a consecução de algo.

• Atitudinais

–

individual e sofrem dizem respeito a propriedades da personalidade influências sociais.

Itens de provas

• Devem ser elaborados com base nos descritores.

• Os descritores devem ser previamente elaborados para compor a matriz de referência de cada disciplina.

Formatos de itens de provas

Há dois formatos básicos: • Questões abertas - o aluno elabora uma resposta.

• Questões fechadas/de múltipla escolha - o aluno seleciona uma resposta dentre várias oferecidas.

Estrutura dos itens avaliativos

1.

Instrução (ou enunciado): indica o caminho para o aluno responder, contextualiza-o para buscar a resposta correta.

2.

Estímulo ou comando: é a questão que se coloca (afirmação, ordem ou pergunta).

3. Resposta: a ser construída ou a ser reconhecida.

Exemplo de questão bem estruturada

• Para responder à questão 1, leia o texto seguinte, publicado na

Revista Carta Capital.

“Há tempos, fico imaginando como ruirá o império norte americano, mas só nos resta fazer especulações. Os Estados Unidos aéreas e marítimas em situação de vigilância máxima, mas há uma fronteira impossível de vigiar: a das mentes cada vez mais doentias que esse tipo de sociedade produz. A bomba estão com suas fronteiras terrestres, não vem de forma. Vem de dentro.” ( Ester Lino, Goiana, GO)

Exemplo de questão bem estruturada (cont.)

Para que um texto atinja seu objetivo comunicacional, um dos principais fatores as é a adequação da linguagem a todas condições de sua produção.

Sobre a linguagem desse texto, é correto afirmar que a) apresenta impropriedades e objetivo proposto.

inadequações, considerando-se o b) mostra um alto grau de formalidade, de que trata.

impróprio para o assunto c) constrói–se num jargão técnico devido ao contexto em que ocorre a comunicação.

d) está de acordo com o enunciatário, levando-se em conta o seu nível de escolaridade.

A estruturação

Pode ser de dois tipos: • A formulação exige que, primeiro, o aluno resolva a situação problema, depois identifique a resposta correta.

• A formulação exige que se analise cada opção para depois identificar a correta.

Recomendações gerais para a elaboração de itens • Numa média de quatro, as alternativas devem conter uma resposta correta e em três incorretas (distratores), mas plausíveis relação ao que se pede.

• Palavras como “nunca, sempre, todo, todos, totalmente, completamente, absolutamente, somente, etc. devem ser evitadas.

• Cada questão deve incluir apenas um problema. Itens complexos, com vários temas ou passos podem resultar em problemas de interpretação.

dimensionalidade, o que dificulta a sua • As “pegadinhas”, isto é, itens que possam ser considerados maliciosos ou enganosos, capazes de induzir o aluno ao erro, devem ser evitadas.

Recomendações gerais (cont.)

• Alternativas como “Todas as anteriores”, “Nenhuma das anteriores”

jamais

devem ser usadas.

• Os conteúdos a serem testados devem ser os relevantes, que contemplem a matriz de referência, e não detalhes de menor importância.

• As alternativas devem ser organizadas com lógica.

• A extensão das alternativas deve ser relativamente a mesma para não servir de pista.

• Os enunciados devem ser completos e independentes, apresentando com clareza o problema a ser resolvido.

• O texto enunciativo deve servir de contexto, não de pretexto, para se fazer um questionamento.

Recomendações gerais (cont.)

• Não se confundirão enunciado/instrução com base/comando. O enunciado contextualiza o problema a ser resolvido; o comando define o que e o como o aluno deve fazer para responder ao que se pede.

• A questão deve permitir ao aluno deduzir a natureza das alternativas pela leitura do enunciado.

• As alternativas devem ser uniformes com relação a conteúdo, forma, extensão, clareza e estrutura gramatical.

• Não se transformará um item de múltipla escolha em vários itens de verdadeiro-falso.

Recomendações gerais (cont.)

• Os itens devem ser formulados de maneira positiva, salvo se houver exigência em contrário no descritor. Neste caso, as palavras negativas (exceto, não, incorreto) devem vir destacadas.

Expressões duplamente negativas devem ser evitadas.

• A norma padrão da língua portuguesa é exigida em qualquer item de prova.

• As questões devem ser variadas e contemplar os três níveis de competência (básico, operacional e global); não apenas transcritórias (de nível básico).

Recomendações gerais (cont.)

• Muito cuidado para que uma questão não forneça “dicas” para outras anteriores ou posteriores.

• Não se usarão distratores estapafúrdios, absurdos.

• As palavras comuns a todas as alternativas devem estar na pergunta.

• Questões do tipo “numere a 2ª coluna de acordo com a 1 ª” devem ser de acordo com a 1 ª.

substituídas por: Estabeleça a correspondência correta entre ..., numerando a 2ª coluna

Recomendações gerais (cont.)

 Alternativas que se contradizem não são admissíveis, definitivamente.

 Devem-se evitar expressões desnecessárias, a exemplo de “Leia com atenção”.

 O objetivo avaliativo deve nortear a elaboração das questões.

 As alternativas precisam apresentar paralelismo.

Um olhar sobre questões abertas

• Quanto à estruturação, devem permitir que o aluno, ao respondê-las, seja capaz de: propor explicações e soluções para o problema; aplicar o que aprendeu a situações novas; - fazer comparações, classificações de dados e de informações;

Um olhar sobre questões abertas (cont.)

estabelecer relações entre fatos e princípios; de causa e efeito...

analisar a propriedade das afirmações; - analisar o valor de procedimentos; - posicionar-se frente a algo; argumentar devidamente sobre sua posição;

Um olhar sobre questões abertas (cont.)

- organizar e sintetizar ideias, ter originalidade e fazer julgamento de valor; formular conclusões, a partir de dados; - expressar se coerentemente na língua escrita.

Cuidados na elaboração de questões abertas

• Evitar questões que peçam apenas: o que, quais , quem, quando, onde, quantos, cite, enumere, etc.

• Não pedir dados sem delimitação: cite alguns, dê exemplos.

Cuidados na elaboração de questões abertas (cont.) • Não fazer questões cuja resposta seja apenas um sim ou um não. Peça sempre um explique ou um justifique. Delimite em quantas linhas.

• Não elaborar questões com: o que você acha, é possível, deve-se, dê sua opinião.

Cuidados na elaboração de questões abertas (cont.) • Evite expressões vagas como: comente brevemente, em poucas linhas, sinteticamente, resumidamente, descreva, o que discorra, disserte, fale sobre, você entende por, o que você sabe sobre. Isso obriga a que se aceite qualquer resposta.

ITEM IMPORTANTE

• Faça, de antemão, a chave de correção das questões abertas, identificando as partes essenciais processo de da resposta, correção.

para ser usada no

Obrigada pela atenção Maria José Motta Viana Doutora em Literatura Comparada / FALE / UFMG Professora da UNATEC – disciplinas: Comunicação e Oratória , Leitura e Produção de Texto , Comunicação e Expressão, Projeto Aplicado Revisora de trabalhos acadêmicos