O que os RTOs australianos devem saber sobre as regras de evidência
As regras de evidência garantem que o processo de avaliação seja válido, confiável e justo. Saiba mais sobre sua importância para os RTOs australianos.
As regras de evidência garantem que o processo de avaliação seja válido, confiável e justo. Saiba mais sobre sua importância para os RTOs australianos.
O setor de Educação e Treinamento Vocacional (VET) na Austrália mudou muito nos últimos anos. Há mais processos de conformidade e burocracia a serem seguidos devido à crescente importância da garantia de qualidade no setor. Organizações de treinamento registradas (RTOs) agora tenho a oportunidade de redefinir o que é uma educação de qualidade.
As Regras de Evidência são um conjunto fundamental de princípios que orientam as práticas de avaliação e moldam a integridade de toda a experiência de treinamento. Essas regras são mais do que uma lista de verificação para RTOs com visão de futuro. Eles são uma estrutura para criar confiança e oferecer competência com confiança.
No entanto, o desafio em torno deles é sua implementação, não apenas na teoria, mas na aplicação, especialmente em um clima em que as expectativas regulatórias estão se estreitando e a inovação não é opcional. Nosso guia aborda detalhadamente as Regras de Evidência e explica como aplicá-las para melhorar e não apenas validar seus resultados de treinamento.
No setor de EFP da Austrália, as Regras de Evidência são os marcadores de qualidade que sustentam decisões de avaliação confiáveis. Eles fazem parte do Apêndice 7 dos Padrões para Organizações de Treinamento Registradas (RTOs) 2015. Seu objetivo é garantir que cada competência concedida seja apoiada por evidências de avaliação confiáveis que demonstrem claramente as habilidades do aluno.
Em sua essência, eles se preocupam com integridade. Na ausência deles, a linha entre demonstração e suposição se confundiria, o que é um risco que um RTO não pode correr. As quatro regras de evidência são validade, suficiência, autenticidade e atualidade.
Cada um deles atua como uma salvaguarda, orientando os avaliadores na avaliação de se as evidências enviadas por um aluno refletem com precisão suas habilidades e conhecimentos no padrão exigido. Os RTOs que desejam se destacar devem dominar essas regras.
Vamos discuti-los em detalhes.
A evidência válida se alinha diretamente com os critérios de desempenho, a evidência de conhecimento e as condições de avaliação descritas no unidade de competência. Ele estipula que as inscrições dos alunos devem refletir sobre o que estão sendo avaliados.
Digamos que um aluno esteja obtendo um Certificado III em Apoio Individual. Eles enviaram evidências para demonstrar competência na prestação de cuidados pessoais a clientes idosos.
Suponha que a unidade exija que o aluno ajude uma pessoa idosa a tomar banho de uma forma que respeite a privacidade e a segurança. Nesse caso, um estudo de caso escrito sobre rotinas de higiene não é suficiente.
Uma evidência válida pode ser uma lista de verificação de observação do supervisor de uma instituição de saúde real ou uma gravação de vídeo (com as permissões apropriadas) mostrando o aluno executando a tarefa de acordo com o padrão. Essa é uma evidência que coincide com a marca.
Suficiência significa ter o suficiente ou mais do que o suficiente de alguma coisa. No contexto da evidência, suficiência significa ter evidências suficientes para atender aos requisitos e expectativas estabelecidos pela unidade.
Os avaliadores precisam ter certeza de que todos os aspectos da competência foram demonstrados, não apenas uma parte dela. É importante ter uma variedade de fontes e formatos de evidências para garantir a suficiência. Esses formatos podem incluir observação direta, perguntas escritas ou verbais, simulações, amostras de trabalho e relatórios de terceiros.
Em nosso exemplo acima, o aluno pode enviar um depoimento de um supervisor do local de trabalho. Embora seja útil, não é suficiente. Eles podem satisfazer a suficiência preenchendo um diário de habilidades ou uma demonstração prática. Ou eles podem responder a perguntas baseadas em cenários para mostrar seu conhecimento e compreensão de um tópico.
Autenticidade significa garantir que a evidência não seja falsificada ou emprestada. Na verdade, é o trabalho do próprio aluno. Como os RTOs estão usando ferramentas e avaliações digitais, a necessidade de verificar quem realmente concluiu o trabalho é mais crítica.
Suponha que o aluno envie uma reflexão bem escrita sobre a ética do cuidado de idosos. Mas é deles? O avaliador pode continuar com uma breve entrevista, pedindo ao aluno que explique seu raciocínio com suas próprias palavras.
Se a explicação verbal deles estiver alinhada com a submissão por escrito, você fortaleceu a autenticidade. Caso contrário, você identificou uma bandeira vermelha antes que ela se tornasse um risco de conformidade.
Com o tempo, as habilidades desaparecem e os sistemas mudam. É por isso que as evidências devem refletir as capacidades atuais e não algo aprendido há uma década. A moeda mantém a capacidade dos alunos de realizar a tarefa no ambiente atual usando as práticas e tecnologias atuais.
No exemplo acima, o aluno pode enviar um relatório de observação do local de trabalho de uma função que ocupou há três anos. A evidência pode ter sido válida e autêntica na época. No entanto, pode não refletir mais a prática atual.
O avaliador pode solicitar registros atualizados das últimas horas de colocação profissional ou observar uma simulação atual usando as melhores práticas atuais para demonstrar a atualidade.
Os RTOs na Austrália podem usar diferentes tipos de evidências para provar competência.
A evidência direta é a forma mais convincente de prova porque é testemunhada em primeira mão pelo avaliador. Ele fornece uma visão direta do desempenho do aluno em cenários do mundo real. Os avaliadores podem observar diretamente o aluno aplicando suas habilidades.
Por exemplo, na educação profissional, um avaliador pode realizar uma entrevista presencial ou um exame verbal para ouvir como o aluno articula as principais áreas de conhecimento. Da mesma forma, em um ambiente de saúde, o avaliador pode observar o aluno realizar um procedimento.
A evidência indireta se refere a materiais que o avaliador pode revisar posteriormente para inferir a competência, uma vez que o trabalho já foi concluído. Alunos que enviam estudos de caso ou ensaios são um exemplo de evidência indireta.
O mesmo vale para portfólios. Ele mostra o desenvolvimento e o crescimento do aluno ao longo do tempo por meio de amostras de trabalho, documentos e muito mais.
Evidências suplementares atuam como suporte para evidências diretas e indiretas. Embora nem sempre seja a principal fonte de prova, a evidência suplementar reforça e valida a alegação de competência ao fornecer contexto adicional e verificação de fontes externas.
Um bom exemplo de evidência suplementar são os relatórios do supervisor e o feedback do mentor. Um supervisor pode dar feedback sobre o desempenho de um estudante de saúde em um ambiente de assistência ao vivo. A evidência pode complementar a reivindicação de competência do aluno, fornecendo uma perspectiva de terceiros sobre suas habilidades e conhecimentos.
Os RTOs australianos devem cumprir as Regras de Evidência para evitar problemas com as autoridades reguladoras. Veja como manter essa conformidade.
Comece com uma estratégia de avaliação abrangente e bem documentada que se alinhe às Regras de Evidência. Você deve definir os resultados da aprendizagem e os critérios de avaliação desde o início.
Crie um plano de avaliação que aborde as quatro regras que discutimos acima. Cada questionário ou atividade deve capturar evidências de uma forma que resista ao escrutínio. É aqui que você decide que tipo de evidência será usada e como coletá-la.
A tecnologia pode ajudá-lo ainda mais a cumprir as Regras de Provas. Por exemplo, Coursebox, um criador de cursos baseado em IA, oferece recursos de avaliação e avaliação de IA que ajudam você a criar avaliações totalmente alinhadas aos requisitos de competência.
Como o Coursebox também permite que os RTOs rotulem cursos de marca branca, você pode garantir que nenhum outro RTO tenha acesso às amostras de trabalho de seus alunos, eliminando possíveis problemas de autenticidade.
Da mesma forma, você pode usar ferramentas para monitorar o desempenho dos alunos. Por exemplo, alunos de cursos relacionados a design e arte podem enviar seus trabalhos no Behance para criar portfólios. Aqueles em cursos de programação podem usar o GitHub para mostrar seus projetos, enquanto escritores e jornalistas podem usar o Medium para publicar seus artigos.
A regra da “moeda” exige que você mantenha as evidências de avaliação atualizadas. Suas avaliações devem estar na mesma página que os padrões e a tecnologia do setor.
Você deve revisar estudos de caso e atualizar cenários, para que surjam novas tendências ou ocorram mudanças no setor. Além disso, use novas ferramentas do setor para manter seus alunos no mesmo nível de seus colegas.
Contrate supervisores, colegas e especialistas do setor para obter evidências complementares valiosas. Eles podem fornecer feedback e insights sobre o desempenho do aluno. Além disso, eles podem oferecer perspectivas alternativas para enriquecer o processo de avaliação.
Você pode usar plataformas baseadas em IA para coletar e consolidar esse feedback. Em seguida, use-o para personalizar o experiência de aprendizado para seus alunos. O feedback também pode destacar quaisquer lacunas ou áreas de melhoria no currículo.
A Australian Skills Quality Authority (ASQA) regula e monitora a qualidade da educação na Austrália. A conformidade com os padrões estabelecidos pela autoridade é imprescindível no país. As Regras de Evidência são um dos muitos padrões que os RTOs devem seguir.
Além de seguir as quatro regras, também é importante coletar o tipo certo de evidência. Enquanto você está fazendo isso, use ferramentas como o Coursebox para fazer suas avaliações corretas desde o início. Como o Coursebox tem recursos de IA, você pode facilmente atualizar e refinar suas avaliações ou o conteúdo do curso conforme necessário.
Mais importante ainda, envolva especialistas terceirizados ou do setor para validar suas avaliações e fornecer feedback. Isso torna suas avaliações mais confiáveis e as alinha aos padrões do setor, ao mesmo tempo em que fornece evidências complementares.