Grupo de controle na cobrança: como provar quanto a estratégia recupera de verdade
Todo relatório de cobrança atribui o caixa do mês a alguma coisa: à régua nova, ao canal novo, à assessoria, ao desconto. Mas parte daquele dinheiro entraria de qualquer jeito. Tem cliente que paga no dia em que recebe o salário, com ou sem mensagem. Tem o que paga porque precisa do crédito de volta. Quando a área de cobrança mostra o resultado ao comitê, a pergunta mais difícil é justamente esta: quanto disso a cobrança causou?
O grupo de controle, ou holdout, é a forma honesta de responder. Uma fatia da carteira fica fora das mudanças, e a diferença entre ela e o resto é o que as mudanças renderam.
Champion x challenger e holdout respondem a perguntas diferentes
O teste champion x challenger compara estratégias entre si: a nova contra a atual. Ele diz qual é melhor. Não diz quanto o programa de cobrança inteiro rendeu desde que começou a mudar, porque a champion de hoje já é o resultado de várias promoções.
O holdout responde a essa segunda pergunta: a champion que anda, promovida teste após teste, contra a champion parada no dia em que o holdout foi ligado.
Como o holdout funciona no jacob labs
- Uma fatia fixa, por sorteio estável. Cada cliente tem um hash do CPF ou CNPJ, e o sorteio decide, uma vez, se ele cai no holdout. O mesmo cliente fica sempre no mesmo lugar.
- A champion congelada. O holdout recebe a estratégia que valia no dia em que foi ligado e fica fora de todos os testes, promoções e ajustes.
- Cobrar continua sendo obrigação. O holdout nunca é “nenhuma ação”: negativação, jurídico e terceirização pelo prazo contratual continuam valendo nele.
- O lift acumulado. A diferença entre o resto da carteira e o holdout é o que as mudanças somaram desde o dia zero.
- Atos assinados. Ligar, desligar e recongelar o holdout exigem permissão própria e a credencial de quem assina; com os quatro olhos ligados, quem assina não pode ser quem pediu. Recongelar é no máximo anual, e o painel mostra um aviso permanente enquanto o holdout existe.
- Nasce desligado. O credor liga por grupo de credores e escolhe o percentual.
O grupo de controle em Configurar: na base de demonstração, ele está desligado, e a tela diz isso. Ligar é ato assinado. Base de demonstração; o nome do credor foi trocado por XPTO.
No desenho de cada teste, o passo do holdout lembra o que acontece quando ele não existe: o teste compara os braços entre si, mas o ganho acumulado do programa não é medido.
O passo 4 do desenho de um teste: o holdout do grupo e o aviso de que ele deve ser ligado antes do teste. Base de demonstração; teste simulado; o nome do credor foi trocado por XPTO.
Quer medir quanto a sua cobrança causa, e não só quanto entra? Solicite um diagnóstico operacional.
A leitura causal: observado contra esperado
O jacob labs lê os testes por intenção de tratar: o que aconteceu com cada cliente sorteado, desde a entrada, em janelas fixas e maturadas. O mérito causal de cada challenger compara o observado com o esperado, métrica por métrica, e mostra a faixa de confiança. É a mesma ideia do holdout aplicada a cada teste: medir contra uma referência sorteada, e não contra o mês anterior.
O mérito causal de cada challenger contra a champion, métrica por métrica. SIMULAÇÃO: o efeito dos braços B e C foi inserido para demonstração; o real é o método.
Cada decisão sabe se veio do holdout
O log de decisão grava, para cada cliente, cada ação e cada dia, de qual versão da estratégia, de qual teste, de qual braço e se do holdout ela saiu. Também grava o porquê de cada “nenhuma ação”, pelo motivo do catálogo. É o que permite reconstruir, meses depois, o que cada grupo recebeu.
As decisões do dia por ação e o “por que não” de cada decisão sem ação. Base de demonstração; o nome do credor foi trocado por XPTO.
E o caixa?
O painel Financeiro do revo360 já mostra o caixa realizado, previsto contra realizado, canal por canal, quem esquentou e quem fechou cada pagamento. O holdout acrescenta a pergunta que o Financeiro sozinho não responde: quanto desse caixa entraria sem as mudanças.
O Caixa Realizado e a leitura da Môzi. Base de demonstração, dados fictícios.
Os cuidados que fazem o holdout valer
- Ligue antes de mudar. O holdout mede a partir do dia em que é ligado; o que mudou antes fica fora da conta.
- Escolha um tamanho que o credor aceita. O holdout custa: é uma fatia da carteira com a estratégia antiga. O percentual é decisão do credor, por grupo.
- Não recongele por impaciência. Recongelar zera a referência. Por isso é no máximo anual e assinado.
- Não confunda holdout com braço sem ação. O braço “sem ação” de um teste de régua tem teto de dias e nunca suspende negativação, jurídico nem terceirização; o holdout recebe uma estratégia inteira.