Top 4 etapas para construir um teste

Este artigo lança luz sobre os quatro principais passos da construção de testes padronizados. Essas etapas e procedimentos nos ajudam a produzir um teste padronizado válido, confiável e objetivo. As quatro etapas principais são: 1. Planejamento do teste 2. Preparação do teste 3. Teste do teste 4. Avaliação do teste.

Etapa # 1. Planejando o Teste:

O planejamento do teste é o primeiro passo importante na construção do teste. O principal objetivo do processo de avaliação é coletar dados válidos, confiáveis ​​e úteis sobre o aluno.

Portanto, antes de preparar qualquer teste, devemos ter em mente que:

(1) O que deve ser medido?

(2) Quais áreas de conteúdo devem ser incluídas e

(3) Que tipos de itens de teste devem ser incluídos.

Portanto, o primeiro passo inclui três considerações principais.

1. Determinar os objetivos do teste.

2. Preparando as especificações do teste.

3. Selecionando os tipos de itens apropriados.

1. Determinando os Objetivos do Teste:

Um teste pode ser usado para diferentes propósitos em um processo de aprendizado de ensino. Ele pode ser usado para medir o desempenho de entrada, o progresso durante o processo de ensino e para decidir o nível de domínio alcançado pelos alunos. Testes servem como um bom instrumento para medir o desempenho de entrada dos alunos. Responde às questões, se os alunos têm a habilidade necessária para ingressar no curso ou não, que conhecimentos prévios o aluno possui. Portanto, deve ser decidido se o teste será usado para medir o desempenho de entrada ou o conhecimento prévio adquirido pelo aluno sobre o assunto.

Os testes também podem ser usados ​​para avaliação formativa. Ajuda a continuar o processo de ensino, a descobrir as dificuldades imediatas de aprendizagem e a sugerir os seus remédios. Quando as dificuldades ainda não foram resolvidas, podemos usar testes de diagnóstico. Testes diagnósticos devem ser preparados com alta técnica. Assim, itens específicos para diagnosticar áreas específicas de dificuldade devem ser incluídos no teste.

Os testes são usados ​​para atribuir notas ou determinar o nível de domínio dos alunos. Esses testes somativos devem abranger todos os objetivos instrucionais e áreas de conteúdo do curso. Portanto, deve-se dar atenção a esse aspecto durante a preparação de um teste.

2. Preparando as Especificações do Teste:

O segundo passo importante na construção do teste é preparar as especificações do teste. Para ter certeza de que o teste irá medir uma amostra representativa dos objetivos instrucionais e das áreas de conteúdo, devemos preparar as especificações de teste. De modo que um design elaborado é necessário para a construção de testes. Um dos dispositivos mais comumente usados ​​para essa finalidade é a 'Tabela de especificações' ou 'Blue Print'.

Preparação da Tabela de Especificação / Blue Print:

A preparação da tabela de especificação é a tarefa mais importante na fase de planejamento. Atua como um guia para a construção do teste. Tabela de especificação ou 'Blue Print' é um gráfico tridimensional mostrando lista de objetivos instrucionais, áreas de conteúdo e tipos de itens em suas dimensões.

Inclui quatro etapas principais:

(i) Determinar o peso para diferentes objetivos instrucionais.

(ii) Determinar o peso para diferentes áreas de conteúdo.

(iii) Determinar os tipos de itens a serem incluídos.

(iv) Preparação da tabela de especificação.

(i) Determinar o peso para diferentes objetivos instrucionais:

Existem vastas matrizes de objetivos instrucionais. Não podemos incluir todos em um único teste. Em um teste escrito não podemos medir o domínio psicomotor e o domínio afetivo. Nós só podemos medir o domínio cognitivo. Também é verdade que todos os sujeitos não contêm objetivos de aprendizagem diferentes, como conhecimento, compreensão, aplicação e habilidade em igual proporção. Portanto, deve ser planejado quanto tempo atrás deve ser dado aos diferentes objetivos instrucionais. Ao decidir isso, devemos ter em mente a importância do objetivo específico para esse assunto ou capítulo.

Por exemplo, se tivermos que preparar um teste em Ciência Geral para a Classe - X, poderemos dar o peso a diferentes objetivos instrucionais como segue:

Tabela 3.1. Mostrando weightage dado a diferentes objetivos instrucionais em um teste de 100 marcas:

(ii) Determinar o peso para diferentes áreas de conteúdo:

A segunda etapa na preparação da tabela de especificação é delinear a área de conteúdo. Indica a área em que os alunos devem mostrar seu desempenho. Isso ajuda a obter uma amostra representativa de toda a área de conteúdo.

Também evita a repetição ou omissão de qualquer unidade. Agora surge a questão de quanto peso deve ser dado a qual unidade. Alguns especialistas dizem que isso deve ser decidido pelo professor preocupado, mantendo em mente a importância do capítulo.

Outros dizem que deve ser decidido de acordo com a área coberta pelo tópico no livro de texto. Geralmente é decidido com base em páginas do tópico, página total no livro e número de itens a serem preparados. Por exemplo, se um teste de 100 marcas deve ser preparado, então, a ponderação para diferentes tópicos será dada a seguir.

Ponderação de um tópico:

Se um livro contiver 250 páginas e 100 testes / itens (marcas) a serem construídos, a ponderação será dada como segue:

Tabela 3.2. Tabela mostrando a ponderação dada a diferentes áreas de conteúdo:

(iii) Determinando os tipos de itens:

A terceira etapa importante na preparação da tabela de especificação é decidir os tipos de itens apropriados. Os itens usados ​​na construção do teste podem ser divididos em dois tipos, como itens do tipo objetivo e itens do tipo ensaio. Para alguns propósitos instrucionais, os itens do tipo objetivo são mais eficientes onde, para outros, as perguntas do ensaio se mostram satisfatórias.

Os tipos de itens apropriados devem ser selecionados de acordo com os resultados de aprendizagem a serem medidos. Por exemplo, quando o resultado é escrito, nomear itens do tipo de suprimento é útil. Se o resultado for identificar um tipo de seleção de resposta correta ou o tipo de reconhecimento, os itens são úteis. Assim, o professor deve decidir e selecionar os tipos de itens apropriados de acordo com os resultados da aprendizagem.

(iv) Preparando o gráfico de três direções:

A preparação do gráfico de três vias é a última etapa na preparação da tabela de especificação. Este gráfico relaciona os objetivos instrucionais à área de conteúdo e aos tipos de itens. Em uma tabela de especificação, os objetivos instrucionais são listados na parte superior da tabela, as áreas de conteúdo são listadas no lado esquerdo da tabela e, sob cada objetivo, os tipos de itens são listados em termos de conteúdo. A Tabela 3.3 é uma tabela modelo de especificação para a ciência da classe X.

Etapa # 2. Preparando o teste:

Depois de planejar a preparação, é o próximo passo importante na construção do teste. Nesta etapa, os itens de teste são construídos de acordo com a tabela de especificação. Cada tipo de item de teste precisa de cuidados especiais para a construção.

O estágio de preparação inclui as três funções a seguir:

(i) Preparar itens de teste.

(ii) Preparar instruções para o teste.

(iii) Preparando a chave de pontuação.

(i) Preparando os itens de teste:

Preparação de itens de teste é a tarefa mais importante na etapa de preparação. Portanto, deve-se ter cuidado ao preparar um item de teste. Os seguintes princípios ajudam na preparação de itens de teste relevantes.

1. Itens de teste devem ser apropriados para o resultado de aprendizagem a ser medido:

Os itens do teste devem ser projetados de forma a medir o desempenho descrito nos resultados específicos de aprendizagem. Para que os itens do teste estejam de acordo com o desempenho descrito no resultado específico da aprendizagem.

Por exemplo:

Resultado de aprendizagem específico - conhece termos básicos

Item de teste - Um indivíduo é considerado obeso quando seu peso é% maior que o peso recomendado.

2. Itens de teste devem medir todos os tipos de objetivos instrucionais e toda a área de conteúdo:

Os itens do teste devem ser preparados de forma a abranger todos os objetivos instrutivos - Conhecimento, compreensão, habilidades de pensamento e corresponder aos resultados específicos de aprendizagem e ao conteúdo do assunto a ser medido. Quando os itens são construídos com base na tabela de especificação, os itens tornam-se relevantes.

3. Os itens de teste devem estar livres de ambiguidade:

O item deve estar claro. O vocabulário inadequado e a estrutura de frases inadequadas devem ser evitados. Os itens devem ser redigidos de tal forma que todos os alunos entendam a tarefa.

Exemplo:

Item pobre - onde nasceu Gandhi?

Melhor - Em qual cidade Gandhi nasceu?

4. Os itens do teste devem ser de nível de dificuldade apropriado:

Os itens de teste devem ter o nível de dificuldade adequado, para que possam discriminar corretamente. Se o item for destinado a um teste referenciado por critério, seu nível de dificuldade deve ser de acordo com o nível de dificuldade indicado pela declaração do resultado específico da aprendizagem. Portanto, se a tarefa de aprendizado for fácil, o item de teste deve ser fácil e, se a tarefa de aprendizado for difícil, o item de teste deve ser difícil.

Em um teste referenciado pela norma, o objetivo principal é discriminar os alunos de acordo com a realização. De modo que o teste deve ser concebido de tal forma que deve haver uma ampla gama de resultados de testes. Portanto, os itens não devem ser tão fáceis para que todos respondam corretamente e também não seja tão difícil que todos deixem de responder. Os itens devem ser de nível de dificuldade médio.

5. O item de teste deve estar livre de erros técnicos e pistas irrelevantes:

Às vezes, há algumas pistas não intencionais na declaração do item que ajudam o aluno a responder corretamente. Por exemplo, inconsistências gramaticais, associações verbais, palavras extremas (sempre, raramente, sempre) e características mecânicas (a afirmação correta é maior do que a incorreta). Portanto, ao construir um item de teste, deve-se tomar cuidado para evitar a maioria dessas pistas.

6. Itens de teste devem estar isentos de predisposição racial, étnica e sexual:

Os itens devem ser de natureza universal. Cuidado deve ser tomado para fazer um item de cultura justo. Ao retratar um papel, todas as facilidades da sociedade devem ter igual importância. Os termos usados ​​no item de teste devem ter um significado universal para todos os membros do grupo.

(ii) Preparando Instrução para o Teste:

Esse é o aspecto mais negligenciado da construção de teste. Geralmente todo mundo dá atenção à construção de itens de teste. Portanto, os fabricantes de teste não anexam instruções aos itens de teste.

Mas a validade e confiabilidade dos itens de teste dependem em grande parte das instruções para o teste. NE Gronlund sugeriu que o testador fornecesse uma direção clara;

uma. O objetivo do teste.

b. O tempo permitido para responder.

c. A base para responder.

d. O procedimento para gravar respostas.

e. Os métodos para lidar com a adivinhação.

Direção sobre o objetivo do teste:

Uma declaração por escrito sobre o propósito do teste mantém a uniformidade do teste. Portanto, deve haver uma instrução escrita sobre o objetivo do teste antes dos itens do teste.

Instrução sobre o tempo permitido para responder:

Devem ser fornecidas instruções claras aos alunos sobre o tempo permitido para o teste completo. Também é melhor indicar o tempo aproximado necessário para responder a cada item, especialmente no caso de perguntas do tipo de redação. Assim, o testador deve avaliar cuidadosamente a quantidade de tempo que leva em consideração os tipos de itens, a idade e a capacidade dos alunos e a natureza dos resultados de aprendizagem esperados. Os especialistas são da opinião de que é melhor permitir mais tempo do que privar um aluno mais lento de responder à pergunta.

Instruções sobre a base para responder:

O testador deve fornecer uma direção específica com base na qual os alunos responderão ao item. A direção deve indicar claramente se os alunos selecionarão a resposta ou fornecerão a resposta. Em itens correspondentes, qual deve ser a base para combinar as premissas e as respostas (estados com capital ou país com produção) deve ser dada. Instruções especiais são necessárias para itens interpretativos. Nos artigos do tipo ensaio devem ser dadas orientações claras sobre os tipos de respostas esperadas dos alunos.

Instrução sobre gravação de resposta:

Os alunos devem ser instruídos sobre onde e como registrar as respostas. As respostas podem ser gravadas nas folhas de respostas separadas ou no próprio papel de teste. Se eles tiverem que responder no próprio teste de papel, eles devem ser direcionados, seja para escrever a resposta correta ou para indicar a resposta correta entre as alternativas. No caso de folhas de respostas separadas usadas para responder a direção do teste, pode ser dada no papel de teste ou na folha de respostas.

Instrução sobre adivinhar:

A direção deve ser fornecida aos alunos se eles devem adivinhar itens incertos ou não em caso de tipo de reconhecimento de itens de teste. Se nada for dito sobre adivinhação, os alunos em negrito adivinharão esses itens e outros responderão apenas os itens dos quais estão confiantes. Para que os alunos em negrito, por acaso, respondam a alguns itens corretamente e garantam uma pontuação maior. Portanto, uma direção deve ser dada "para adivinhar, mas não palpites selvagens".

(iii) Preparando a Chave de Pontuação:

Uma chave de pontuação aumenta a confiabilidade de um teste. Para que o testador forneça o procedimento para a pontuação dos scripts de resposta. Instruções devem ser dadas se a pontuação será feita por uma chave de pontuação (quando a resposta é gravada no papel de teste) ou por um stencil de pontuação (quando a resposta é gravada em uma folha de respostas separada) e como as marcas serão atribuídas aos itens de teste. .

No caso de itens do tipo ensaio, deve ser indicado se deve ser pontuado com 'método pontual' ou com o método 'classificação'. ' No 'método pontual' cada resposta é comparada com um conjunto de respostas ideais na pontuação. Então, um determinado número de pontos é atribuído.

No método de classificação, as respostas são classificadas com base nos graus de qualidade e determinam o crédito atribuído a cada resposta. Assim, uma chave de pontuação ajuda a obter dados consistentes sobre o desempenho dos alunos. Portanto, o testador deve preparar um procedimento de pontuação abrangente junto com os itens de teste.

Etapa # 3. Experimente o Teste:

Uma vez que o teste esteja preparado, é hora de confirmar a validade, confiabilidade e usabilidade do teste. Experimente nos ajuda a identificar itens defeituosos e ambíguos, para determinar o nível de dificuldade do teste e para determinar o poder de discriminação dos itens.

Experimente envolve duas funções importantes:

(uma) Administração do teste.

b) Pontuando o teste.

a) Administração do ensaio:

Administração significa administrar o teste preparado em uma amostra de alunos. Portanto, a eficácia do teste final depende de uma administração justa. Gronlund e Linn afirmaram que "o princípio orientador na administração de qualquer teste em sala de aula é que todos os alunos devem ter uma chance justa de demonstrar a realização dos resultados de aprendizagem que estão sendo medidos". Isso implica que os alunos devem ter um ambiente físico e psicológico adequado durante o tempo de teste. Qualquer outro fator que possa afetar o procedimento de teste deve ser controlado.

Ambiente físico significa arranjo de sentar adequado, luz e ventilação adequadas e espaço adequado para a invigilação. Ambiente psicológico refere-se a esses aspectos que influenciam a condição mental do aluno. Portanto, devem ser tomadas medidas para reduzir a ansiedade dos alunos. O teste não deve ser administrado imediatamente antes ou depois de uma grande ocasião como esportes anuais em drama anual etc.

Deve-se seguir os seguintes princípios durante a administração do teste:

1. O professor deve falar o menos possível.

2. O professor não deve interromper os alunos no momento do teste.

3. O professor não deve dar nenhuma sugestão a nenhum aluno que tenha perguntado sobre algum item.

4. O professor deve providenciar a devida invigilância para evitar que os alunos façam batota.

(b) Pontuação do teste:

Depois que o teste é administrado e os scripts de resposta são obtidos, o próximo passo é marcar os scripts de resposta. Uma chave de pontuação pode ser fornecida para pontuação quando a resposta está no próprio papel de teste. A chave de pontuação é um roteiro de resposta de amostra no qual as respostas corretas são registradas.

Quando a resposta está em uma folha de respostas separada naquele momento, um estêncil de pontuação pode ser usado para responder aos itens. O stencil de pontuação é uma folha de respostas de amostra em que as alternativas corretas foram perfuradas. Ao colocar o stencil de pontuação no script de resposta dos alunos, a resposta correta pode ser marcada. Para artigos do tipo ensaio, podem ser fornecidas instruções separadas para pontuar cada objetivo de aprendizagem.

Correção para adivinhar:

Quando os alunos não têm tempo suficiente para responder ao teste ou os alunos não estão prontos para fazer o teste naquele momento, eles adivinham a resposta correta, em itens do tipo reconhecimento.

Nesse caso, para eliminar o efeito de adivinhar a seguinte fórmula é usada:

Mas há uma falta de concordância entre os psicometristas quanto ao valor da fórmula de correção no que se refere à validade e à confiabilidade. Nas palavras de Ebel, “nem a instrução nem as penalidades resolverão o problema da adivinhação”.

Guilford é da opinião de que “quando o meio é excluído na análise de itens, a questão de corrigir ou não as pontuações totais torna-se bastante acadêmica”. Little disse que “a correção pode estar abaixo ou acima da pontuação dos alunos”. ver as opiniões acima, o testador deve decidir não usar a correção para adivinhar. Para evitar essa situação, ele deve dar tempo suficiente para responder ao item de teste.

Etapa # 4. Avaliando o Teste:

Avaliar o teste é o passo mais importante no processo de construção do teste. A avaliação é necessária para determinar a qualidade do teste e a qualidade das respostas. A qualidade do teste implica que quão bom e confiável é o teste? (Validade e confiabilidade). Qualidade das respostas significa que os itens são inadequados no teste. Também nos permite avaliar a usabilidade do teste na situação geral da sala de aula.

Avaliar o teste envolve as seguintes funções:

(a) Análise de itens.

(b) Determinar a validade do teste.

(c) Determinar a confiabilidade do teste.

d) Determinando a usabilidade do teste.

(a) Análise de itens:

A análise de itens é um procedimento que nos ajuda a descobrir as respostas para as seguintes perguntas:

uma. Se os itens funcionam como pretendido?

b. Se os itens do teste têm nível de dificuldade apropriado?

c. Se o item está livre de pistas irrelevantes e outros defeitos?

d. Se os distratores em itens do tipo de múltipla escolha são eficazes?

Os dados de análise de item também nos ajudam:

uma. Para fornecer uma base para uma discussão de classe eficiente do resultado do teste

b. Para fornecer uma base para os trabalhos de reparação

c. Para aumentar a habilidade na construção de testes

d. Para melhorar a discussão em sala de aula.

Procedimento de análise de item:

O procedimento de análise de itens dá ênfase especial ao nível de dificuldade do item e ao poder discriminante do item.

O procedimento de análise de item segue as seguintes etapas:

1. Os papéis de teste devem ser classificados do maior para o menor.

2. Selecione 27% de papéis de teste de maior e 27% de menor valor.

Por exemplo, se o teste for administrado em 60 alunos, selecione 16 papéis de teste da extremidade superior e 16 papéis de teste da extremidade inferior.

3. Mantenha de lado os outros papéis de teste, pois eles não são necessários na análise do item.

4. Tabule o número de alunos no grupo superior e inferior que selecionou cada alternativa para cada item de teste. Isso pode ser feito no verso do papel de teste ou um cartão de item de teste separado pode ser usado (Fig. 3.1)

5. Calcule a dificuldade do item para cada item usando a fórmula:

Onde R = Número total de alunos corrigiu o item.

T = número total de alunos tentou o item.

Em nosso exemplo (fig. 3.1), de 32 alunos de ambos os grupos, 20 alunos responderam corretamente ao item e 30 alunos experimentaram o item.

A dificuldade do item é a seguinte:

Isso implica que o item tem um nível de dificuldade adequado. Porque é costume seguir a regra de 25% a 75% para considerar a dificuldade do item. Isso significa que se um item tiver uma dificuldade de item maior que 75%, será um item muito fácil se ele for menor que 25%, então o item é um item muito difícil.

6. Calcule o poder discriminante do item usando a seguinte fórmula:

Poder de discriminação de itens =

Onde R _U = Alunos do grupo superior que obtiveram a resposta correta.

R _L = Estudantes do grupo inferior que acertaram a resposta.

T / 2 = metade do número total de alunos incluídos na análise do item.

Em nosso exemplo (Fig. 3.1) 15 alunos do grupo superior responderam o item corretamente e 5 do grupo inferior responderam corretamente o item.

Uma alta taxa positiva indica o alto poder discriminativo. Aqui .63 indica um poder discriminativo médio. Se todos os 16 alunos do grupo inferior e 16 alunos do grupo superior responderem corretamente ao item, o poder discriminatório será 0, 00.

Isso indica que o item não tem poder discriminatório. Se todos os 16 alunos do grupo superior responderem corretamente ao item e todos os alunos do grupo inferior responderem corretamente ao item, o poder discriminante do item será 1, 00, indicando um item com o máximo poder discriminatório positivo.

7. Descubra a eficácia dos distratores. Um distrator é considerado um bom distrator quando atrai mais alunos do grupo inferior do que o grupo superior. Os distratores que não são selecionados ou muito raramente selecionados devem ser revisados. Em nosso exemplo (fig. 3.1), o distrator 'D' atrai mais alunos.

Grupo superior ao grupo inferior. Indica que o distractor 'D' não é um distractor eficaz. 'E' é um distrator que não é respondido por ninguém. Por isso, também precisa de revisão. Distractor 'A' e 'B' revelam-se eficazes, uma vez que atraem mais alunos do grupo inferior.

Preparando um arquivo de item de teste:

Quando o processo de análise do item terminar, podemos obter uma lista de itens eficazes. Agora a tarefa é fazer um arquivo dos itens efetivos. Isso pode ser feito com cartões de análise de itens. Os itens devem ser organizados de acordo com a ordem de dificuldade. Ao arquivar os itens, os objetivos e a área de conteúdo que ele mede devem ser mantidos em mente. Isso ajuda no uso futuro do item.

(b) Determinação da validade do teste:

No momento da avaliação, estima-se que até que ponto o teste mede o que o testador pretende medir.

(c) Determinar a confiabilidade do teste:

O processo de avaliação também estima em que medida um teste é consistente de uma medição para outra. Caso contrário, os resultados do teste não podem ser confiáveis.

(d) Determinando a Usabilidade do Teste:

Experimente e o processo de avaliação indica até que ponto um teste é utilizável em condições gerais de sala de aula. Implica que até que ponto um teste é utilizável do ponto de vista de administração, pontuação, tempo e economia.