O que é o Painel de Qualidade da Avaliação no Insights?
O Painel de Qualidade da Avaliação fornece aos instrutores, designers instrucionais e outros interessados em entender a eficácia do Quiz, uma ferramenta para identificar avaliações de baixo desempenho e tomar medidas informadas para melhorar iterativamente essas avaliações. Ele compila as respostas dos alunos e fornece métricas que destacam questionários e itens de questionário com baixo desempenho.
O painel tem como objetivo responder às seguintes questões:
- Quais questionários ou perguntas podem precisar de uma revisão?
- Quais informações adicionais são necessárias para apoiar intervenções ou iterações de avaliações?
O objetivo é que instrutores e designers instrucionais melhorem a qualidade de suas avaliações para apoiar o uso futuro de suas atividades.
Por que atualizamos o Painel de Qualidade da Avaliação?
Lançado inicialmente em 2019, o Painel de Qualidade da Avaliação recebeu muitos comentários sobre o que está e o que não está funcionando. O feedback se concentrou em cinco áreas principais, e essas se tornaram os objetivos do projeto:
- Melhoria de desempenho
- Maior acessibilidade
- Suporte estendido ao navegador
- Identificação de itens em risco
- Filtros aprimorados
O que você pode esperar no lançamento de dezembro?
Com a versão de dezembro (20.21.12), a experiência atualizada do painel está disponível para ativação por meio da variável de configuração. O valor padrão será OFF, embora os administradores possam ativá-lo quando estiverem prontos. Observe que esta experiência não terá uma experiência opcional, será ATIVADA ou DESATIVADA.
Após o primeiro carregamento, o painel exibirá cartões interativos, destacando o número de questionários incluídos no painel, questionários com pontuações médias baixas e a distribuição da confiabilidade do questionário. Tudo isso é seguido por uma tabela, listando todos os questionários e cálculos disponíveis. O filtro Unidade organizacional atualizará quais cursos são incluídos ou excluídos de todos os cálculos e dados exibidos. A interação com os cartões filtrará a tabela de dados, destacando instantaneamente os questionários que podem precisar de revisão.
Figura: Um exemplo do Painel de Qualidade da Avaliação.
As configurações do painel fornecem uma área para definir limites para baixo desempenho, bem como quais colunas devem ser incluídas na tabela, permitindo que cada usuário personalize sua exibição de acordo com suas próprias preferências.
A Análise de Item do Questionário está disponível quando um Questionário individual é selecionado na tabela de dados. As novas métricas fornecem detalhes sobre as perguntas do questionário para o questionário selecionado. Novamente, os cartões na parte superior do painel são interativos, filtrando a tabela de dados abaixo para refletir o cartão selecionado. Os limites para cada indicador podem ser personalizados por usuário na área de configurações do painel, assim como na página principal. As perguntas do questionário com desempenho abaixo dos limites definidos serão sinalizadas, com a métrica de baixo desempenho destacada na tabela.
Figura: Análise de itens do questionário No Painel de Qualidade da Avaliação.
Selecionar o item Questionário mostra o prompt de um item, bem como opções de resposta, comentários e dicas. A edição do questionário ou das perguntas do questionário exigirá navegação até a ferramenta Questionário.
Figura: Um exemplo da visualização da pergunta do questionário.
O que vem a seguir?
Atualizações contínuas para essa experiência, principalmente a capacidade de agregar e exibir itens sinalizados no painel para revisão imediata. Fique de olho na versão prévia de 90 dias e nas notas de versão para obter atualizações sobre quando esses recursos serão lançados no produto.
