Como é corrigida uma prova escrita de francês?
Dois corretores independentes, em duplo cego, e uma concordância medida em 0,71 sobre 6 569 provas do TCF.
A sua prova de produção escrita não é lida por uma só pessoa. O manual do candidato do TCF, versão de abril de 2026, descreve duas correções independentes e em duplo cego. E sobre 6 569 provas, um estudo do TALN de julho de 2024 mede em 0,71 a concordância entre esses dois corretores. Eis o que isso muda.
Quem corrige uma prova de produção escrita, e como?
A prova de produção escrita do TCF tem três tarefas. Segundo o manual do candidato de France Éducation international, dispõe de 60 minutos no TCF tout public, no TCF Québec e no TCF Canada, e de 30 minutos no TCF IRN. As extensões previstas vão de 60 a 120 palavras na tarefa 1, de 120 a 150 na 2 e de 120 a 180 na 3; a versão IRN pede de 30 a 60 palavras e depois de 40 a 90.
Segue-se a correção, e aí o manual é direto: «Les épreuves d'expression écrite (EE) sont évaluées 2 fois de manière totalement indépendante et en double aveugle», ou seja, cada prova é avaliada duas vezes, de forma totalmente independente e às cegas. Cada corretor atribui a cada uma das três tarefas um nível que vai de «A1 non atteint», abaixo do A1, até C2. Registam-se assim seis níveis para uma só prova, e depois uma regra de cálculo que considera esses seis níveis produz a nota final e o nível final. O candidato recebe uma nota sobre 20 traduzida em nível do QECR.
Há uma consequência prática que quase ninguém antecipa: o manual prevê o nível «A1 non atteint» se uma tarefa não respeitar o número de palavras exigido. Contar as palavras não é um pormenor, é uma condição. Se ainda hesita entre as duas famílias de exames, o nosso artigo TCF ou DELF compara para que servem, e o das datas de inscrição indica os prazos.
Dois corretores dão o mesmo nível à mesma prova?
É a pergunta que ninguém faz, e foi medida. O estudo TCFLE-8, apresentado no JEP-TALN-RECITAL em julho de 2024, reúne 6 569 provas de produção escrita do TCF, 581 333 palavras, de candidatos que declaram oito línguas habituais diferentes.
Nesse corpus, a concordância entre os dois corretores, medida em kappa quadrático ponderado, é de 0,71. A concordância entre os corretores e o nível finalmente atribuído à prova sobe para 0,84. A repartição por nível diz o que eles leem: 689 provas de nível A1, 1 375 de A2, 1 466 de B1, 1 427 de B2, 1 127 de C1 e 485 de C2.
Esse 0,71 explica o resto do procedimento: o manual prevê que, havendo diferença importante entre os dois corretores, se realiza sistematicamente uma terceira correção. Lida isolada, a frase parece uma formalidade; lida ao lado do número medido, torna-se uma peça necessária. Dois profissionais formados concordam muitas vezes, nem sempre.
O português é um dos grupos mais presentes no corpus: 872 das 6 569 provas vêm de candidatos que declararam o português como língua habitual, logo atrás do russo (889). Os números acima não são, portanto, uma média distante: descrevem um conjunto em que o seu perfil linguístico está bem representado.
Pode uma máquina corrigir uma prova de francês?
Em parte, e o manual di-lo sem rodeios. Algumas provas de produção escrita feitas no computador podem receber uma primeira correção da ferramenta FIDELIA; a segunda correção continua humana, e quem não quiser essa avaliação pode pedir o suporte em papel. Desde outubro de 2024 o manual descreve assim uma dupla correção híbrida, também com uma terceira correção humana se as duas divergirem muito.
Os números do estudo situam essas ferramentas com precisão. O modelo CamemBERT atinge 0,88 de kappa quadrático ponderado contra 0,93 dos avaliadores humanos. Mas só acerta o nível exato em 57 % dos casos, contra 76 %. A sua exatidão contígua, isto é, a parte das provas colocadas no nível certo ou a um nível de distância, chega a 0,98 contra 0,99. Os outros dois modelos testados, XGBoost e uma regressão logística, ficam em 0,79 e 0,69 de kappa.
A máquina erra raramente por muito, mas erra muitas vezes por pouco. É exatamente o tipo de erro que uma segunda leitura humana apanha.
O DELF é classificado da mesma maneira?
Não, e confundi-los faz perder tempo de preparação. O regulamento das provas do DELF e do DALF, publicado no Bulletin officiel n.º 31 de 27 de agosto de 2009, fixa uma nota total sobre 100, com cada prova sobre 25, e sobre 50 no DALF C2. O limiar de aprovação é 50 em 100 e, sobretudo, existe uma nota mínima exigida por prova de 5 em 25, elevada a 10 em 50 no DALF C2.
A consequência é nítida: no DELF, um total de 50 não chega se uma só prova descer abaixo de 5 em 25. No TCF não há limiar nem reprovação, apenas um nível. E o regulamento do DELF não descreve dupla correção nem duplo cego: o procedimento acima é o do TCF, não uma regra comum a todos os exames. Os nossos artigos sobre o DELF B1 e sobre a preparação do DELF B2 detalham as provas de cada nível.
O que estes números não dizem?
Quatro reservas. Primeira, 0,71 de kappa quadrático ponderado é uma concordância forte, não um desacordo: nada aqui permite escrever que a classificação seria arbitrária. Segunda, as 6 569 são provas, não candidatos, e a repartição descreve esse corpus, não a população do TCF. Terceira, um dos autores do estudo, Vincent Folny, trabalha em France Éducation international, que publica o manual: as duas fontes não são totalmente independentes, ainda que uma seja uma comunicação de congresso revista e a outra um documento oficial. Quarta, o corpus só contém provas do TCF, por isso o 0,71 não se transfere para o DELF, que tem os seus próprios júris.
Daí saem três gestos. Conte as palavras de cada tarefa antes de entregar, porque uma tarefa fora dos limites vale «A1 non atteint». Trate as três tarefas como três avaliações separadas, porque cada corretor dá três notas. E no DELF olhe primeiro para a sua nota mais baixa, não para o total, porque é ela que pode deixá-lo de fora.
Contar palavras e ler um regulamento faz-se sozinho, em poucos minutos. Saber se o que escreve sustenta o nível pretendido exige alguém que o leia como um corretor o leria. Na Frenchee as aulas são ao vivo com professores nativos diplomados, individuais ou em pequenos grupos de 3 a 5 alunos, sem assinatura, e o nosso teste de nível dá uma primeira referência.
