Tamanho de amostra e intervalo de confiança: a estatística que sua pesquisa de CX precisa

Por que "NPS® 72" sozinho pode enganar

NPS® 72 parece um número sólido, até você descobrir que veio de 14 respostas. Sem saber o tamanho da amostra por trás de qualquer indicador de CX, o número pode estar contando uma história bem diferente da realidade que ele parece descrever.

É comum ver empresa comemorando, ou entrando em pânico, porque o NPS® subiu ou caiu alguns pontos de um mês pro outro, sem nunca perguntar quantas pessoas responderam em cada período. Se num mês vieram 200 respostas e no outro vieram 20, comparar os dois números lado a lado como se fossem igualmente confiáveis é, na prática, comparar coisas diferentes.

Intervalo de confiança, explicado sem estatística chata

Intervalo de confiança é, no fundo, uma forma de dizer "o número real provavelmente está nessa faixa, não exatamente neste ponto". Toda pesquisa é uma amostra, você não ouviu todos os seus clientes, só uma parte deles, e por isso o resultado carrega uma margem de erro. Quanto menor a amostra, maior essa margem.

Isso não é defeito da pesquisa. É matemática básica de amostragem: quanto mais gente responde, mais a amostra se aproxima do que aconteceria se você conseguisse ouvir a base inteira, e menor fica a margem de erro em volta do número que aparece no dashboard.

Um exemplo numérico pra tirar a abstração

Imagina que sua pesquisa retornou um NPS® de 72, com intervalo de confiança de ±9 pontos. Na prática, isso quer dizer que o NPS® "verdadeiro" da sua base, se você conseguisse ouvir todo mundo e não só quem respondeu, está, com boa probabilidade, em algum lugar entre 63 e 81.

Repare no que isso muda: um NPS® 72 com IC ±9 é bem diferente de um NPS® 72 com IC ±2. No primeiro caso, você não pode nem afirmar com segurança que está acima de 70. No segundo, a confiança no número é bem mais sólida. O valor exibido no dashboard é o mesmo, 72, mas o que ele te permite afirmar é completamente diferente.

Como a margem de erro encolhe com mais respostas

Vale visualizar isso numa tabela ilustrativa. Os números abaixo são exemplos pra fixar a lógica, não uma tabela de referência estatística exata pra qualquer cenário, já que a margem real também depende de outros fatores da pesquisa.

Respostas na amostra	Margem de erro aproximada	Leitura prática
25 respostas	bem larga	trate como sinal fraco, não como decisão
150 respostas	moderada	já dá pra comparar períodos com mais segurança
500 respostas	estreita	número confiável pra decisão de rotina

Repare que o salto de confiança entre 25 e 150 respostas é enorme, mas o salto entre 150 e 500 já é bem mais discreto. É por isso que perseguir amostra gigantesca pra toda pesquisa raramente compensa o esforço: o ganho de precisão desacelera rápido depois de certo ponto, e o tempo investido em aumentar a amostra costuma valer mais a pena sendo usado pra agir sobre o que a pesquisa já revelou.

Regra prática de quantas respostas dão confiança razoável

Não existe número mágico universal, mas dá pra usar uma régua prática: abaixo de 30 a 50 respostas, trate qualquer indicador como direcional, não como verdade estatística. Bom pra sentir tendência, ruim pra tomar decisão de peso sozinho. Entre 100 e 300 respostas, o intervalo de confiança já costuma ficar numa faixa razoável pra maioria das decisões operacionais. Acima disso, cada resposta adicional reduz a margem de erro cada vez menos, o ganho de confiança desacelera.

• Menos de 30-50 respostas: use como sinal direcional, não como decisão isolada
• 100 a 300 respostas: margem de erro geralmente aceitável pra decisões de rotina
• Acima de 300-400: ganho de precisão adicional já é pequeno pra maioria dos casos de CX
• Ao comparar dois períodos, sempre olhe se o tamanho de amostra dos dois é parecido

O erro de reagir a variação de amostra pequena

O erro mais caro que se repete: time de CX vê o NPS® cair de 68 pra 61 num mês em que a amostra caiu de 250 pra 25 respostas, e sai criando plano de ação em cima de uma queda que, estatisticamente, pode não significar nada. Pode ser só ruído de amostra pequena somado a quem, por acaso, resolveu responder naquele mês.

Antes de reagir a uma variação, vale sempre perguntar duas coisas: o tamanho da amostra mudou muito entre os períodos? E essa variação está dentro ou fora do intervalo de confiança do período anterior? Se a queda de 68 pra 61 está dentro da margem de erro, você não está vendo uma queda real, está vendo a mesma realidade estatística com uma amostra menor e mais barulhenta.

Isso não significa que amostra pequena inutiliza a pesquisa, significa só que ela pede mais cautela na leitura. Uma plataforma de NPS® que já entrega o indicador junto com o intervalo de confiança, e não só o número isolado, evita boa parte desse erro de interpretação. E ajuda a explicar pra liderança, com mais clareza, por que uma variação pequena de um mês pro outro não é motivo de alarme, nem de comemoração.

Vale lembrar também do outro lado da moeda: subsegmentar demais uma pesquisa, por exemplo olhar NPS® por cada filial ou por cada vendedor individual, reduz o tamanho de amostra de cada corte e pode gerar números aparentemente muito bons ou muito ruins que não resistem à mesma pergunta sobre intervalo de confiança. Segmentar é importante, mas cada segmento carrega sua própria margem de erro, e ignorar isso é um jeito garantido de tirar conclusão errada de um recorte pequeno demais.