Este documento apresenta informações sobre o Exame Nacional de Desempenho de Estudantes (Enade) e sobre a avaliação da qualidade no ensino superior no Brasil. O documento discute o Sistema Nacional de Avaliação da Educação Superior (Sinaes) e o Enade, incluindo os processos de inscrição, participação obrigatória de estudantes, e as etapas do exame. Além disso, fornece exemplos e análises de questões do estilo do Enade.
2. Apresentação
Adriano Moitinho Pinto
Professor especialista em indicadores de
qualidade no ensino superior
• Professor-Elaborador do ENADE (2014 e 2015);
• Avaliador MEC / INEP para Graduação (Presencial e
EAD) e Instituições de Ensino Superior;
• Instrutor responsável por treinar a equipe
operacional das Olimpíadas 2016 no Brasil.
• Docente, tutor e gestor do curso de Administração
(presencial), da Universo Salvador (BA).
3. “O que não é medido
não é gerenciado”
Robert Kaplan e David Norton
4. “A beleza é o acordo
entre o conteúdo e a
forma”
Henrik Ibsen
8. Avaliação Institucional
SINAES
Sistema
Nacional de
Avaliação do
Ensino
Superior
Lei n° 10.861
2004
Avaliação dos Cursos de
Graduação
Avaliação
externa
Avaliação
interna
Autoavaliação Institucional
ENADE
Exame Nacional de
Desempenho de Estudantes
Os Indicadores de Qualidade
Vamos falar de SINAES
9. Enade
O processo de inscrição de estudantes
habilitados ao Enade é a alma do Exame.
As informações apresentadas pelo INEP
sobre o Enade têm por base os dados
apresentados pelas IES durante o processo
de inscrição.
Em 2016 o estudante também vai inserir ou
corrigir seus dados no sistema do INEP.
10. Enade
O Enade é obrigatório?
Conforme disposto em Lei nº. 10.861/2004, o Enade constitui-se
componente curricular obrigatório, sendo inscrita no histórico escolar
do estudante somente a situação regular com relação a essa
obrigação. O estudante selecionado que não comparecer ao Exame
estará em situação irregular junto ao Enade.
O estudante habilitado ao Enade é obrigado a participar do Exame?
Sim. A participação do estudante habilitado ao Enade é condição
indispensável ao registro da regularidade no histórico escolar, assim
como à expedição do diploma pela IES. Em 2016, somente os
estudantes concluintes participarão da prova em 20/11/2016.
Quando o estudante é considerado habilitado ao Exame?
Se concluintes de Bacharelado, aqueles que tenham expectativa de
conclusão do curso até julho de 2017 ou que tenham cumprido oitenta
por cento ou mais da carga horária mínima do currículo do curso da
11. Enade
A participação do estudante no Enade é feito por amostragem?
Embora a Lei nº. 10.861, de 14 de abril de 2004, que criou o Sistema
Nacional de Avaliação da Educação Superior (Sinaes), permita a
realização do exame por amostragem, em 2016 a aplicação será
censitária. Ou seja, todos os estudantes concluintes habilitados ao
Enade 2016, identificados conforme controle acadêmico feito pela
IES, e inscritos pela respectiva Instituição de Educação Superior
deverão participar da prova. Do mesmo modo, todos os ingressantes
devem ser inscritos no exame, ainda que não realizem a prova.
Quais os estudantes dispensados da inscrição no Enade 2016?
Estudantes que colarem grau até o dia 31 de agosto de 2016 e
estudantes que estiverem oficialmente matriculados e cursando
atividades curriculares fora do Brasil, na data de realização do Enade
2016, em instituição conveniada com a IES de origem do estudante.
Estudante cujo ingresso ou conclusão no curso não coincidir com os
anos de aplicação do Enade respectivo.
12. As etapas do Enade
1º. O questionário online do estudante
2º. A prova presencial (4 horas)
3º. O questionário de impressões dos
estudantes sobre a prova (9 questões)
4º. O questionário online para
coordenador(a) do curso
13. Questões de Múltipla Escolha (37 Questões);
Questões Discursivas (3 questões).
Questões (prova) no padrão Enade
15. 15
Q1. O gráfico abaixo representa investimentos
na área da saúde realizados no Brasil.
16. 16
A ausência da Fonte de onde foi retirado
o gráfico da questão é um problema, pois
interfere na análise dos itens, e em
conformidade com as as normas
técnicas.
Análise de Questão no padrão ENADE
Fonte
Questão 1
17. 17
Correto. A questão apresenta número de
alternativas coerente com a proposta do
ENADE, ou seja, cinco opções (alíneas).
Análise de Questão no padrão ENADE
No. de Alternativas
Questão 1
18. 18
Os distratores não estão plausíveis.
Análise de Questão no padrão ENADE
DistratoresGabarito
- Os distratores “a” e “b” não são respostas plausíveis, pois tratam de
informações que não foram apresentadas na imagem;
- O distrator “d” usa de subterfúgios que dificultam a resposta do
estudante sem contemplar a avaliação do recurso “interpretar gráfico”;
- O distrator “e” avalia compreensão de conceitos e suas aplicações,
mas não está relacionado ao contexto e objetivo da questão.
Questão 1
19. 19
Não há paralelismo sintático na
apresentação da redação das alternativas.
Análise de Questão no padrão ENADE
Paralelismo Sintático
...Mantenha o paralelismo sintático na apresentação das
opções/alternativas, por exemplo: todas começando por
verbo, ou por substantivo, ou por artigo.
Questão 1
20. O item deve ser
estruturado de modo que
se configure uma
unidade de proposição e
que contemple as
orientações da matriz de
referência.
Para tanto, devem ser
observadas a coerência
e a coesão entre suas
partes, apresentando
uma articulação entre
elas, explicitando uma
única situação-problema
e uma abordagem
homogênea do conteúdo
selecionado.
Estrutura de questão:
Múltipla Escolha
21. O texto-base motiva ou compõe a situação-
problema que será objeto de avaliação no item,
formulada a partir da utilização de um ou mais
textos (verbais ou não verbais ― imagens, figuras,
tabelas, gráficos ou infográficos, esquemas,
quadros, experimentos, entre outros), que poderão
ser de dois tipos:
– (i) criados pelo próprio elaborador para o contexto do item,
ou
– (ii) referenciados por publicações de apropriação pública.
Destacamos que é imprescindível a citação da
fonte, conforme normas da ABNT, sempre que
for utilizado texto-base referenciado por
publicações de apropriação pública.
1º. Texto-base
22. O enunciado constitui-se de uma ou mais orações e não deve
apresentar informações adicionais ou complementares aos
textos-base; ao contrário, deverá considerar exatamente a
totalidade das informações previamente oferecidas.
No enunciado, inclui-se uma instrução clara e objetiva da tarefa a
ser realizada pelo estudante, podendo ser expressa como
pergunta ou frase a ser completada ou respondida pela
alternativa correta.
É no enunciado que se determina o nível de habilidade cognitiva
avaliado, desde a simples identificação de informações explícitas
até níveis mais complexos como a capacidade de síntese do
estudante. Desse modo, a sua formulação adequada contribui
diretamente para a validade da medida de desempenho.
2º. Enunciado/comando
23. As opções/alternativas são possibilidades de
respostas para a situação-problema
apresentada, dividindo-se em gabarito (a
alternativa que contempla a resposta correta)
e em distratores (alternativas que contemplam
respostas incorretas)... A construção das
alternativas, principalmente os distratores,
é uma tarefa complexa e exige grande
domínio técnico na sua elaboração.
3º. Opções/alternativas
25. 25
Questão 2.
Análise de Questão no padrão ENADE
Os elementos caracterizadores “inicialmente” e “com
certeza” não são recomendados, pois, frequentemente, o
estudante pode descartar uma das opções apenas porque
ela contém um desses termos.
Alternativas
As questões não devem ter como elemento caracterizador os termos
“somente”, “apenas”, “nunca”, “jamais”, “raramente”, “exclusivamente”,
“unicamente”, “sempre”, “totalmente”, “todo”, “pode ser”, “tudo”,
“ninguém”, “nenhum”, “nada”, “algum”, “pode acontecer”, “pode
haver”, “pouco”, “às vezes”, “qualquer”, entre outros.
O estudante pode descartar uma opção de resposta apenas por
conter um desses termos.
26. 26
Questão 2.
Análise de Questão no padrão ENADE
Sim, a questão exige do estudante o recurso “capacidade
de interpretar situações e estabelecer relações de causa e
efeito”, mas, a depender das diretrizes do curso podia
ser melhor explorado, por exemplo, caso envolvesse o
aspecto da sustentabilidade.
Enunciado
É importante relacionar a questão com as característica do perfil do
egresso. É preciso ter clareza do que se deseja avaliar, por isso são
definidos perfis, recursos e os objetos de conhecimento a serem
avaliados para se alcançar o rigor no planejamento e na execução da
avaliação.
Texto-Base
Alternativas
27. 27
Questão 2.
Análise de Questão no padrão ENADE
5 alíneas: A questão não apresenta o número de
opções/alternativas exigidas para a prova do
ENADE.
Quant Alternativas
28. 28
Questão 2.
Análise de Questão no padrão ENADE
Em questões de resposta única, NÃO usar a
opção apresentada na alínea “d”: “Nenhuma das
respostas anteriores é correta”.
Alternativas
Nas provas do ENADE há opções do tipo: “Nenhuma das
respostas anteriores” ou “Todas as respostas anteriores”,
exceto em questões de resposta múltipla.
29. 29
Questão 2.
Análise de Questão no padrão ENADE
Todos os distratores precisam ser plausíveis.
Alternativas
O distrator “c”, por exemplo, não atende ao recurso
solicitado e não é discriminativo, pois a resposta é óbvia.
30. Estilos: Interpretação; Resposta
Múltipla e asserção-razão.
Questões de Múltipla Escolha
Vantagens & Desvantagens
Vantagens e Desvantagens...
31. Apresenta ao estudante um problema, uma
situação-problema ou um estudo de caso e o
estudante deve ser capaz de identificar a
resposta correta (gabarito). São apresentadas
cinco opções de resposta, sendo uma é
gabarito e as outras quatro são distratores.
1º. Questão de “Interpretação”
Vantagem: tendem a ser menos cansativos para o
estudante.
Desvantagem: dificuldade ao professor de criar bons
distratores, que sejam plausíveis.
32. Apresenta uma situação, estudo de caso,
situação-problema ou problema e, em seguida,
afirmações pertinentes a ela. O estudante deverá
julgar cada uma das afirmações para, em
seguida, escolher uma alternativa em uma
“chave de respostas”.
Questões de “Resposta Múltipla”
33. Questões de “Resposta Múltipla”
Vantagem: permite ao elaborador explorar mais de um aspecto do
conteúdo ou até mais de um conteúdo em uma única questão.
Tende a ser preferido pelos elaboradores, pois costumam ser mais fáceis de
serem elaborados, uma vez que não são necessários quatro distratores
plausíveis para um gabarito. No caso do item de resposta múltipla, o
elaborador pode propor um determinado número de assertivas que devem
ser julgadas independentemente umas das outras, como corretas ou
incorretas. O elaborador pode optar por apresentar mais de uma assertiva
correta, ou até mesmo todas.
Desvantagem: tende a tornar a prova mais cansativa para o estudante e a
aumentar a dificuldade da questão. Isso porque múltiplos aspectos de um
conteúdo precisam ser avaliados de uma só vez e os itens costumam ser
mais longos. Além disso, quando não são elaborados com cuidado, tendem
a avaliar habilidades cognitivas mais simples, como memorização e
retenção de conceitos.
35. Tem como núcleo básico 2 afirmações,
interligadas pela palavra “porque”. As 2 afirmações
podem ou não estabelecer relação de causalidade
entre si. O estudante deve ser capaz de julgar as 2
afirmações para identificar se são corretas ou
incorretas. Ambas as asserções podem ser
corretas, uma delas incorreta ou as duas
incorretas.
E, sendo as 2 assertivas corretas, o estudante deve
identificar se há relação de causalidade entre elas.
1º. Questão de “asserção-razão”
36. 1º. Questão de “asserção-razão”
Vantagem: permite avaliar habilidade cognitiva mais
complexa, que é a de estabelecer relação de
causa/consequência. Além disso, o estudante, para
acertar a questão, precisa ser capaz de julgar com
eficiência as duas afirmações e estabelecer a relação
causal. Para o elaborador, este tipo de item tende a ser
menos complexo para elaborar, pois ele precisa apenas
propor uma relação entre duas asserções. Essas
asserções podem estar corretas ou não, assim como
podem ou não estabelecer relação de causalidade.
37. 1º. Questão de “asserção-razão”
Desvantagem: por avaliarem mais habilidades tendem
a ser mais difíceis para os estudantes, portanto devem
ser cuidadosamente pensadas. Além disso, os
elaboradores muitas vezes não têm sucesso ao tentar
estabelecer a relação de causalidade, que muitas vezes
simplesmente não existe e acaba invalidando o gabarito
proposto. É necessário pensar as duas asserções com
cuidado, para que elas tenham vínculo material entre si.
Isso é importante para não tornar o item não-plausível e
simplório.
40. As implicações – I
1. A realização do ENADE é pré-requisito para colação de grau.
- Sem Enade = Sem diploma.
2. A Avaliação é trienal.
- Os conceitos ficam “carimbados” no curso por três anos.
3. A divulgação dos resultados do Enade alimenta inúmeras matérias
produzidas pela imprensa.
- Todos sabem o conceito do curso (ranking).
4. Cada aluno recebe um Boletim de Desempenho próprio.
- O aluno pode anexar ao seu histórico escolar (ranking).
5. A Prova é aplicada simultaneamente em todo país.
- Oportunidade para comparar o desempenho com uma quantidade tão
grande de alunos de diferentes instituições.
Por que fazer o ENADE ?
41. • Perda de benefícios aos estudantes:
- Cursos com conceito 1 e 2 no ENADE;
- Cursos com Conceito Prévio (CPC) 1 e 2.
•Alunos não podem concorrer à bolsa FIES;
•Cursos não podem oferecer bolsas do
PROUNI;
•Avaliação in loco do curso pelo INEP.
As implicações – II
Por que fazer o ENADE ?
42. • No mercado de trabalho;
• Na seleção em programas de pós-
graduação;
• No reconhecimento (status) social dos
cursos.
As implicações – III
Por que fazer o ENADE ?
43. Encerrar Inscrições
Cabe ao Coordenador de Curso informar ao
INEP o encerramento das atividades de
inscrição de estudantes habilitados ao
Enade e geração automática do protocolo de
encerramento de inscrições.
O protocolo de encerramento é o documento
oficial de conclusão das atividades de
inscrição de estudantes habilitados ao
Enade.
44. Dúvidas, escreva para:
Prof. Adriano Moitinho Pinto
E-mail: moitinho.adriano@gmail.com
Blog: http://adrianomoitinho.blogspot.com.br/
Conheça as credenciais do professor em:
CV Lattes: http://lattes.cnpq.br/5458395276577133
Linkedin: www.linkedin.com/in/profadrianomoitinho
O objetivo desse material é sensibilizar os estudantes sobre a importância dos indicadores de qualidade no ensino
superior brasileiro, ENADE. Divulgação gratuita. Todos os direitos reservados.
Fontes: Produção própria e MECINEP (2016).
O b r i g a d o!