Vamos usar um caso de uso em que tenhamos uma atividade A/B de modo que 80% do tráfego seja atribuído a (Controle A) e 20% (Tratamento B) e passemos para 50% (Controle A) / 50 % (Tratamento B), então, eventualmente, 0% (Controle A) / 100% (Tratamento B). Então, depois que fomos para 100% (Tratamento B), como os usuários são atribuídos às experiências?

Se você alterar manualmente a% de divisão para 100% para a Experiência B, os visitantes que anteriormente foram alocados para A (Controle) permanecerão em suas experiências atribuídas inicialmente.  A mudança de tráfego afetará apenas novos participantes.

Recomenda-se que, se você quiser alterar porcentagens ou afetar significativamente o fluxo de pessoas em cada experiência, crie ou copie uma nova atividade. Caso contrário, se você alterar as porcentagens em experiências diferentes, levará alguns dias para que os dados voltem a normalizar se muitos compradores forem visitantes de retorno. Por exemplo, se seu teste A/B for dividido em 50/50 e você alterar a divisão para 80/20, nos primeiros dias após essa alteração, os resultados poderão parecer distorcidos. Se o tempo médio de conversão for alto, o que significa que leva várias horas ou mesmo dias para fazer uma compra, essas conversões atrasadas podem afetar os relatórios. Então, naquela primeira experiência em que o número passou de 50 para 80, e o tempo médio de conversão é de dois dias, apenas pessoas de 50% da população estão convertendo no primeiro dia do teste, embora hoje 80% população esteja entrando na experiência. Isso faz parecer que o índice de conversão despencou, mas vai normalizar novamente depois que esses 80% das pessoas tiverem os dois dias para converter

Esta obra está licenciada sob uma licença não adaptada da Creative Commons Attribution-Noncommercial-Share Alike 3.0  As publicações do Twitter™ e do Facebook não são cobertas pelos termos do Creative Commons.

Avisos legais   |   Política de privacidade online