Uma avaliação baseada em cenários pede aos alunos que usem informações em uma situação, e não simplesmente que memorizem uma definição. A tradução pode modificar a situação original de maneiras sutis. Portanto, é importante incluir o responsável pelo conteúdo de aprendizagem original para confirmar as informações. Um funcionário pode adquirir, no trabalho, conhecimentos que não estão presentes no material de origem, uma resposta plausivelmente errada pode se tornar obviamente irracional, ou o feedback do avaliador pode ajudar a explicar uma decisão diferente. As frases traduzidas podem estar corretas, mas a avaliação pode não estar completa sem essa importante etapa de confirmação.
A localização da avaliação de cenários, portanto, aborda a configuração, as escolhas, a justificativa das respostas e o feedback da revisão como uma unidade conectada. Para os gestores de aprendizagem e localização, o objetivo é preservar as decisões que o curso pretende avaliar, ao mesmo tempo que se torna a versão linguística fluente para o público-alvo. A Terralíngua oferece suporte a projetos de tradução de cursos e produção de conteúdo interativo, incluindo avaliações e outros trabalhos de produção no Articulate Storyline e no Adobe Captivate. Os revisores de conteúdo de aprendizagem do cliente são uma parte essencial do processo, aprovando a lógica das respostas e as adaptações substanciais. A participação dos revisores, a incorporação do feedback das revisões e as reuniões por vídeo com a equipe são gratuitas, sem qualquer custo adicional.
Serviços de localização de e-learning e treinamento da Terralíngua
Como definir o que a localização da avaliação de cenários deve preservar
Comece pelo objetivo de aprendizagem: o que uma resposta bem-sucedida deve demonstrar? Uma questão pode avaliar o reconhecimento de um limite de aprovação, a escolha de uma conversa apropriada ou a decisão sobre quais informações solicitar. Indique os objetivos pretendidos da decisão no briefing da tradução. Sem essa percepção, um revisor pode melhorar a fluência do texto, eliminando justamente a distinção que o exercício foi concebido para testar.
Justifique a resposta indicada, explicando o motivo pelo qual ela está correta. Inclua as razões pelas quais as outras opções estão erradas ou são menos apropriadas. Uma única letra de resposta não é suficiente, especialmente quando as opções podem ser embaralhadas. Os tradutores precisam saber o raciocínio por trás do motivo pelo qual uma escolha é incorreta. Será devido ao momento, à autoridade, à falta de informação ou a uma suposição errada? Essas diferenças determinam qual redação deve permanecer precisa.
As diretrizes para adaptação de testes da Comissão Internacional de Testes enfatizam a verificação do significado em todas as populações-alvo e a limitação de influências culturais ou linguísticas não relacionadas ao propósito da avaliação. Eles também abordam as evidências necessárias para apoiar os testes adaptados. Esses princípios fornecem um contexto útil para a localização. No entanto, eles não estabelecem pontuações ou níveis de dificuldade equivalentes. O responsável pelo conteúdo de aprendizagem deve definir os parâmetros de confirmação da revisão adequados ao uso pretendido da avaliação.
Diretrizes da Comissão Internacional de Testes para tradução e adaptação de avaliações
Como fornecer um pacote completo de contexto para cada pergunta
A exportação de texto para tradução pode separar o cenário das opções apresentadas e inserir o feedback em outra parte do arquivo. Restaure essas correlações por meio de identificadores de itens estáveis e uma visualização de referência. Forneça toda a interação, incluindo o material que os alunos veem antes da pergunta. Um fato apresentado em um diálogo anterior pode determinar por que uma resposta está correta.
- Objetivo de aprendizagem, papel esperado do aprendiz e conhecimentos prévios pressupostos.
- Texto do cenário, pergunta, todas as opções, resposta correta e explicação de cada opção.
- Correto, incorreto, tente novamente e feedback posterior de revisão, quando disponível.
- Imagens, diálogos, narração, legendas e caminhos alternativos que fornecem informações.
- Regras de pontuação, instruções de seleção, limites de tentativas e comportamento de navegação aprovado.
- Responsável pelo aprendizado do cliente, versão de origem, público-alvo e restrições de adaptação.
Identifique quais informações foram intencionalmente omitidas. Alguns cenários testam se os alunos reconhecem quando precisam pedir esclarecimentos para responder. A inclusão de uma explicação útil nas instruções de configuração pode ajudar. Por outro lado, a omissão de um fato pode indicar uma falha acidental no material de origem. O tradutor deve levantar essa questão com a pessoa responsável pelo conteúdo. Ela decide se a questão precisa de correção antes que a localização prossiga.
Os tradutores devem usar referências publicadas, bem como arquivos editáveis do curso. Uma referência útil mostra o tempo, a sequência e o contexto visual que uma lista de texto não consegue capturar. Se um item estiver vinculado a um banco de perguntas, explique ao tradutor se é possível que ele seja exibido sem o slide anterior. A apresentação do conteúdo deve fornecer as informações necessárias para a lógica da resposta correta, não apenas para o leitor, mas também para o tradutor.
Como manter os papéis, as condições e o cronograma intactos
O título de um cargo pode alterar a decisão que um aluno está autorizado a tomar. Um coordenador, supervisor e aprovador podem ter responsabilidades e níveis de acesso diferentes, mesmo quando os títulos são usados de forma intercambiável. Explique a autoridade do cargo no cenário, em vez de pedir aos tradutores que a infiram apenas pelo título.
Proteja condições como “antes”, “depois”, “somente se”, “a menos que” e “primeiro”. Uma pergunta que indaga sobre a primeira ação não é equivalente a uma pergunta sobre qual ação é a melhor escolha. Da mesma forma, “Qual resposta é a mais apropriada?” pode implicar uma comparação entre opções plausíveis, enquanto “Qual resposta é permitida?” faz uma pergunta diferente. Preserve a distinção pretendida ou solicite uma revisão aprovada do original antes da tradução.
Revise pronomes e atribuição de diálogos onde vários personagens aparecem. O idioma-alvo deve deixar claro quem observou o problema, quem recebeu a solicitação e quem pode decidir. Esclarecer uma referência gramatical é diferente de fornecer novos fatos. Se o original não definir a quem pertence uma ação, o responsável pela aprendizagem deve resolver essa incerteza.
Como revisar as alternativas incorretas com o mesmo cuidado que analisa as respostas corretas
Um distrator é uma resposta incorreta que parece ser plausível para alguém que não compreendeu totalmente o conceito. Um processo de revisão de distratores traduzidos verifica se a resposta ainda expressa o conceito errôneo pretendido. Ela não deve se tornar sem sentido, acidentalmente correta ou tão mal formulada que os alunos possam rejeitá-la sem testar o conhecimento que está sendo avaliado.
Compare as opções entre si. Se a alternativa correta usar a mesma expressão característica do enunciado, mas as demais apresentarem vocabulário não relacionado, a frase poderá fornecer uma pista sobre a resposta. Diferenças em termos de adequação gramatical, especificidade ou detalhamento também merecem atenção. O revisor deve sinalizar sugestões não intencionais em vez de, mecanicamente, deixar todas as opções do mesmo comprimento ou estilo.
Mantenha claras as distinções entre opções semelhantes. “Solicite ao aprovador que confirme a exceção” e “Informe ao aprovador que a exceção foi confirmada” representam ações diferentes. Uma tradução com uma linguagem genérica sobre entrar em contato com o aprovador elimina o contraste. A lógica da resposta deve explicar qual distinção é importante, para que a frase soe natural em outro idioma.
Não torne um distrator claramente incorreto pelo acréscimo de palavras como “sempre”, “nunca” ou “imediatamente”, a menos que elas estejam presentes no texto original. Da mesma forma, evite melhorar a escolha errada em uma tradução para criar uma orientação sólida. Quando um elemento distrator parecer indefensável ou ambíguo no contexto de destino, o tradutor deverá propor uma adaptação com a devida justificativa e obter a aprovação do responsável pelo conteúdo didático.
Como praticar com um cenário fictício de aprovação
Considere este exemplo de um curso de processo interno. Uma questão do teste envolve um coordenador que recebe uma solicitação que está além do seu limite de aprovação. O cenário indica que as informações da solicitação estão completas. No entanto, o processo documentado exige que um aprovador autorizado tome a decisão. A pergunta questiona o que o coordenador deve fazer em seguida. Seu objetivo é avaliar o reconhecimento de um limite de autoridade, e não a qualidade da solicitação.
- Opção A: aprovar a solicitação, pois todas as informações necessárias estão presentes.
- Opção B: encaminhar a solicitação ao aprovador autorizado.
- Opção C: pedir ao solicitante que envie as mesmas informações novamente.
De acordo com essa política inventada, o responsável pelo aprendizado seleciona a opção “B”. A opção “A” confunde completude com autoridade; a opção “C” introduz repetição desnecessária. A tradução deve preservar essas razões. Alterar o título de "coordenador" para um diferente poderia conferir autoridade de aprovação, tornando a opção "A" defensável. Remover a afirmação de que a solicitação está completa poderia fazer com que a opção “C” parecesse razoável.
A análise deve, portanto, examinar mais do que apenas se a opção “B” soa correta. Isso deve confirmar que a questão inicial ainda estabelece o limite, que “A” ainda representa a mesma suposição errônea e que “C” permanece errada pelo mesmo motivo. Caso um processo regional conceda autoridade diferente, o responsável deverá decidir se o percurso necessita de um cenário aprovado separadamente. A localização não deve pressupor que a política seja idêntica em todos os locais, quando não o é.
Como adaptar detalhes culturais sem alterar a decisão
Alguns detalhes fornecem o contexto; outros determinam a resposta. Nomes, locais incidentais ou uma expressão coloquial desconhecida podem ser adaptados. Uma relação hierárquica, um limite estabelecido por uma política ou uma sequência obrigatória podem ser elementos essenciais a preservar. Identifique a função de cada detalhe antes de alterá-lo no processo de tradução. Um exemplo familiar só é útil se preservar a informação necessária para tomar a decisão pretendida.
Evite basear-se em suposições generalizadas sobre como as pessoas em um país se comunicam ou reagem à hierarquia. Pergunte a revisores familiarizados com o público-alvo se a cena é compreensível e crível para eles. O feedback deles deve identificar problemas específicos, como uma função desconhecida ou uma expressão cujo significado implícito se perdeu. Evite substituir um estereótipo cultural.
Por exemplo, substituir uma expressão idiomática esportiva por linguagem simples pode preservar a decisão em um cenário de atendimento ao cliente. Substituir uma recusa por uma promessa de resolver o problema pode alterar o comportamento que está sendo avaliado. Registre a mudança proposta, o motivo pelo qual ela é necessária e quais partes do cenário ou do feedback ela afeta. O responsável pelo conteúdo de aprendizagem deve aprovar a lógica revisada e quaisquer implicações nas políticas.
Números e formatos exigem cuidados semelhantes. Uma data pode ser reformatada para facilitar a leitura, mas uma alteração no prazo final pode afetar a resposta. Um valor monetário pode ser incidental ou pode definir um limite de aprovação. Não converta valores nem substitua limites locais sem aprovação. Analise cuidadosamente o uso de pontos e vírgulas decimais. Explique a finalidade do valor para que as equipes de idioma e produção estejam cientes do formato necessário.
Como manter o feedback associado à opção selecionada
O feedback deve explicar o raciocínio pretendido, e não apenas repetir que uma resposta está incorreta. Traduza a explicação em relação à escolha específica. No exemplo fictício, o feedback para “A” deve preservar a diferença entre uma solicitação completa e a autorização para aprová-la. O feedback para a opção “C” deve abordar a solicitação desnecessária de informações já fornecidas.
Verifique em que etapa da interação o aluno se encontra. Na primeira tentativa, a dica pode ocultar a resposta deliberadamente, enquanto o feedback final a explica. Combinar ambos com a mesma explicação útil pode revelar a resposta prematuramente. Mantenha o objetivo de cada etapa e confirme se os alunos podem revisitar o cenário ou ver o feedback após concluir o questionário.
As configurações das ferramentas de autoria são uma parte importante dessa relação. A documentação do Articulate Storyline distingue o feedback para uma pergunta do feedback associado a escolhas individuais e oferece suporte à ramificação com base nas respostas. Portanto, analisar apenas os slides com as perguntas principais pode levar à perda de textos e de comportamentos importantes. Verifique os caminhos configurados no projeto fornecido, em vez de presumir que todos os questionários usam o mesmo modelo de feedback.
Documentação do Articulate Storyline sobre feedback e ramificação
Como verificar o contexto do questionário multilíngue após a adaptação
Inserir traduções de volta em uma ferramenta de autoria pode introduzir problemas de apresentação que não eram visíveis durante a revisão do texto. Uma opção mais longa pode ser cortada, um balão de diálogo pode ocultar um personagem ou um painel de feedback pode esconder o controle de continuação. Verifique o contexto do questionário multilíngue no curso implementado, incluindo as informações disponíveis quando o aluno precisa escolher uma opção.
Preste atenção em como o texto, a narração e as imagens compartilham informações. Se a narração mencionar uma condição fundamental, mas o subtítulo a omitir, os alunos poderão receber informações diferentes. Se uma ilustração sugerir uma relação que o texto não estabelece, sinalize a inconsistência. Mantenha as adaptações visuais e de áudio dentro do cenário aprovado, em vez de tratá-las como alterações independentes.
Preserve a identidade da resposta independentemente da ordem em que for exibida. Quando as opções são embaralhadas, uma explicação que se refere à "segunda opção" pode não ser confiável. Utilize os identificadores aprovados do projeto e inspecione a saída de acordo com as configurações definidas. Confirme se o mapeamento da resposta correta, a resposta selecionada, o feedback e a pontuação permanecem conectados após a inserção do conteúdo traduzido.
Não ajuste os limites de tempo, o número de tentativas ou os pesos da pontuação simplesmente para acomodar textos mais longos. Discuta isso antecipadamente com o responsável pelo conteúdo de aprendizagem e cheguem a um acordo sobre uma solução, caso sejam necessárias modificações. Alterações na apresentação podem melhorar a legibilidade, mas mudanças na administração ou na pontuação precisam de aprovação separada. Teste o pacote de entrega acordado no ambiente pretendido, com responsabilidade clara pelas verificações do sistema de gestão de aprendizagem.
Como separar a aprovação linguística das evidências de avaliação
Os revisores linguísticos avaliam a confiabilidade, a clareza, a terminologia e possíveis pistas de formulação não intencionais. Especialistas em aprendizagem ou no assunto do questionário confirmam a lógica da resposta, as suposições de papéis e a aceitabilidade das adaptações. Os testadores de produção verificam se a interação segue a configuração aprovada. Essas são responsabilidades complementares. Um questionário que, tecnicamente, funcione bem ainda pode fazer a pergunta errada.
Para avaliações consequenciais, como aquelas utilizadas para dar suporte à certificação ou comparar grupos, o responsável deve envolver especialistas qualificados em avaliação para determinar as evidências necessárias para a conclusão do processo. Testes e análises piloto podem ser apropriados, visto que a redação traduzida e um gabarito inalterado não demonstram um nível de dificuldade equivalente ao do original. Mesmo um pequeno questionário formativo se beneficia da verificação de como alunos representativos entendem o cenário, sem exigir essa verificação como validação estatística.
Documente as decisões do feedback da revisão por identificador do item, idioma, versão de origem e problema. Inclua o motivo pelo qual a adaptação foi aprovada e se houve alterações nos comentários ou nos elementos visuais. Consolide os comentários conflitantes e solicite esclarecimentos ao responsável pelo conteúdo de aprendizagem. Um editor que trabalhar nesse arquivo posteriormente deverá ser capaz de distinguir uma adaptação intencional de um afastamento acidental do original.
Como definir os entregáveis da avaliação
Um escopo útil pode incluir texto localizado para os itens, um registro de adaptação, decisões terminológicas, arquivos de autoria atualizados e um pacote publicado para testes do cliente. Inclua todos os estados de feedback e itens do banco de perguntas, não apenas o caminho exibido em uma demonstração. Especifique a versão da ferramenta, os recursos vinculados, os idiomas-alvo e o responsável que aprovará o conteúdo de aprendizagem.
- Significado: o cenário mantém as funções aprovadas, os fatos relevantes, as condições e a decisão pretendida.
- Opções: a resposta selecionada permanece apropriada e as alternativas incorretas mantêm os erros de raciocínio pretendidos.
- Feedback: cada resposta recebe a explicação aprovada na etapa correta.
- Implementação: o mapeamento de respostas, a ramificação, as instruções de seleção e a pontuação seguem as configurações aprovadas.
- Aprovação: adaptações substanciais e questões de conteúdo não resolvidas são aprovadas pelo responsável pela aprendizagem.
O esforço depende do número de decisões e caminhos distintos, e não apenas da contagem de palavras. Uma pergunta curta com alternativas sutis pode exigir mais discussão do que um longo slide explicativo. Inclua tempo no cronograma para uma discussão de revisão da justificativa, implementação das decisões do cliente e verificações de teste durante o curso. Uma amostra representativa deve incluir um cenário difícil para que a equipe possa confirmar como as adaptações serão propostas e aprovadas.
Perguntas frequentes
Os tradutores devem ter acesso às respostas corretas?
Sim. Forneça as respostas corretas e suas justificativas por meio do processo de acesso acordado. Analisar as opções sem conhecer o raciocínio por trás delas torna mais difícil identificar mudanças de significado. O gabarito é um material de referência importante para a equipe do projeto.
Podemos substituir um exemplo desconhecido?
Proponha uma alternativa que preserve o objetivo de aprendizagem, as condições relevantes e as razões pelas quais cada escolha está certa ou errada. Solicite que o responsável pelo conteúdo de aprendizagem aprove a alteração, incluindo feedback e recursos visuais relacionados. Se as correlações também mudarem, crie um item de avaliação revisado em vez de fazer um simples ajuste de redação.
A tradução reversa é suficiente para aprovar um questionário?
Ela pode auxiliar no processo de revisão, mas não mostra como as opções aparecem, o que uma ramificação faz ou como os alunos-alvo interpretam a situação. Combine a revisão linguística acordada com a revisão do responsável pela aprendizagem e as verificações de implementação. Especialistas em avaliação determinam quaisquer evidências adicionais necessárias para o uso pretendido.
Como planejar um projeto de localização para avaliação de cenários
Os serviços de eLearning oferecidos pela Terralíngua incluem textos para cursos, avaliações, feedback e suporte à produção de conteúdo interativo, com experiência no uso do Storyline e do Captivate. Discuta como o idioma e a ferramenta de autoria funcionam em conjunto, mantendo a autonomia do cliente sobre a lógica das respostas e as adaptações substanciais. O objetivo é uma interação traduzida que comunique a decisão aprovada de forma clara.
Para avaliação, envie cenários representativos com todas as opções, justificativas para as respostas, feedback, arquivos editáveis e uma referência publicada. Inclua as funções dos alunos, os idiomas-alvo, as restrições de adaptação, os resultados esperados, os revisores e o prazo. Essas informações ajudam a definir o trabalho em torno do significado da avaliação, em vez de tratar suas sequências individuais como textos não relacionados.