A última barreira antes de publicar: o QA Director

No rascunho de um artigo havia uma citação. Uma frase de aparência bem convincente, escrita como se fosse a conclusão de uma pesquisa. Quando rodamos a conferência conforme o procedimento, veio um relatório de quem tinha escrito o texto: "A citação em questão foi apagada, porque não foi possível confirmar a fonte". Um relatório caprichado. E com uma razão que faz sentido.

Só que, ao buscar a frase dentro do rascunho de forma mecânica, ela ainda estava lá, no meio do texto.

Isso é a confabulação (aqui: o fenômeno em que a IA relata ter feito um trabalho que, na verdade, não fez), que já mencionamos algumas vezes nesta série. Não existe má intenção. Também não é uma tentativa de mentir. Acontece que a decisão "isto deveria ser apagado" e a lembrança "isto foi apagado" acabam se juntando dentro do texto do relatório. Para quem lê, o relatório soa tão natural que você simplesmente acredita nele.

Não acreditar; medir

O papel chamado QA Director cuida desse último passo. É a barreira antes de publicar.

O ponto mais importante no desenho desse papel não é deixar de ler os relatórios, e sim não usar o relatório como base. Se disserem "apaguei", buscamos no rascunho para confirmar se sumiu de verdade. Se disserem "corrigi o link", seguimos aquele link na prática. Se disserem "cadastrei no registro", consultamos o registro e olhamos se a linha existe. De um lado, o relatório em palavras; do outro, o fato que dá para medir por máquina. Quando os dois divergem, tomamos a máquina como correta.

Por que insistir tanto nisso? Porque o relatório copia, tal e qual, a paisagem que está na cabeça de quem escreve. Se, dentro dessa cabeça, o processo terminou direito, o texto do relatório sai limpo e bem arrumado. Mesmo que o arquivo real não tenha mudado, a aparência do relatório não mostra nenhum sinal estranho. Uma conferência que só lê o texto praticamente não pega esse tipo de erro.

Qualidade e fato são coisas diferentes

Aquilo que o QA Director observa se divide em duas camadas.

Uma é a garantia de qualidade interna, ou seja, a conferência do acabamento antes de publicar. Se o estilo está alinhado com os artigos que já existem, se nada saiu do formato combinado, se não entrou alguma palavra que não pode ser usada. Aqui o trabalho é discreto: derrubar os itens da lista de conferência, um por um.

A outra é a checagem de fatos (aqui: confirmar se aquilo que está escrito é mesmo assim). Nesta organização, damos número aos itens de conferência anteriores à publicação, e a checagem de fatos fica fixa como um desses itens. Deixamos que ela possa ser chamada pelo número para não abrir espaço à decisão de "hoje é urgente, então vamos pular". Quando um item tem nome e número, pular fica registrado. E, sabendo que fica registrado, pular fica mais difícil.

Essas duas camadas parecem próximas, mas têm naturezas diferentes. Um desvio de estilo, você percebe lendo. Já uma citação que não existe, ou um trabalho que consta como feito, você não percebe lendo. Por isso o QA Director recebe, além da capacidade de ler, um meio de medir.

Sem que ninguém tenha culpa, o texto passa

Voltando à cena do começo. Naquele momento, se houve alguma falha de quem entregou o relatório, a decisão em si estava certa. Uma citação sem fonte confirmada deve ser apagada, e essa conclusão não tem erro nenhum. O que faltou foi o meio entre a conclusão e a execução.

Falhas assim não acontecem por falta de senso de responsabilidade. Pelo contrário: acontecem justamente no meio de um raciocínio cuidadoso. Por isso "prestar atenção" não previne. Para prevenir, só resta encaixar, logo antes da publicação, uma etapa que vá buscar o fato por um caminho diferente do relatório.

O QA Director não é um papel que melhora o rascunho. Melhorar é trabalho de quem escreve e de quem ajusta; quando o texto chega a esta barreira, ele já está pronto. O que se faz aqui é confirmar, tocando com a mão, se o que está pronto é mesmo aquilo que disseram que era. Uma etapa discreta, que na maioria das vezes não encontra nada e serve só para deixar passar.

Se ainda assim ela continua ali, é porque a própria sequência de dias em que nada aparece já é um registro de que essa etapa está funcionando.