Um resultado melhor deve ser comunicado no âmbito da amostra, versão, lote e condições testados, em vez de ser generalizado a toda uma gama.
Indicar o resultado observado no seu âmbito real
Quando um novo resultado de teste é melhor, a declaração mais segura e rigorosa identifica exatamente o que produziu o resultado: o identificador do produto testado, a versão ou o lote relevantes, a amostra, o método, as condições e a base de comparação. A conclusão deve manter-se nesse nível. Um resultado obtido com uma única amostra ou lote não demonstra, por si só, que todas as unidades, lotes ou produtos de uma série tenham mudado.
Esta distinção é importante porque os testes podem responder a várias perguntas diferentes. Podem descrever o espécime testado, apoiar uma decisão sobre um lote definido ou contribuir com evidência sobre um processo mais amplo. Estas conclusões não são intercambiáveis. O NIST Engineering Statistics Handbook explica que a amostragem de aceitação é utilizada para decidir se um lote é provavelmente aceitável, e não para estimar a qualidade do lote. Esse princípio reforça a necessidade de evitar transformar evidência limitada de amostragem numa alegação sem restrições sobre toda a gama de produtos.
Separar a melhoria da sua possível causa
Um resultado superior também não estabelece por que motivo ocorreu. Antes de o atribuir a uma melhoria, compare os registos antigos e novos relativamente à revisão do design, às alterações de materiais ou processos, ao método de amostragem, à configuração do teste, ao condicionamento, ao procedimento do operador e às regras de avaliação. Se estes fatores não tiverem sido controlados ou documentados, a causa deve permanecer indeterminada.
O relatório pode afirmar que o artigo testado obteve um resultado melhor nas condições indicadas. Não deve afirmar que toda a gama foi melhorada, salvo se alterações documentadas e evidência representativa sustentarem esse âmbito mais amplo.
Alargar a alegação apenas quando a evidência se alarga
Uma formulação mais abrangente só se torna adequada depois de a evidência ligar o resultado às versões relevantes e à população de produção correspondente. Até lá, classifique o resultado como específico da amostra ou do lote, preserve as condições de comparação e identifique separadamente as questões sem resposta. Desta forma, comunica o resultado favorável sem exagerar o seu alcance ou a sua causa.