A Amazon lançou um novo serviço de testes para que os desenvolvedores Alexa possam aumentar o engajamento dos usuários com as skills. Chamado de Alexa A/B Testing, esses testes foram criados para trazer mais informações de como fazer os usuários ficarem mais tempo no aplicativo e, consequentemente, fazer mais compras por voz.
De acordo com um post no blog de desenvolvedores da Alexa, os donos de skills podem usar o serviço para projetar experimentos focados nas métricas de engajamento, retenção, desistência e monetização do cliente.
Com isso, os desenvolvedores podem analisar uma série de itens. A lista inclui, por exemplo, a taxa de atrito percebida pelo cliente, ofertas de compras In-Skill (ISP), vendas do ISP, taxa de sucesso de compra de oferta de ISP, retenção da skill no dia seguinte, diálogos das skills e dias ativos da skill.
O post explica que o serviço permite que os desenvolvedores de skills criem experimentos A/B com o objetivo de maximizar, por exemplo, as compras de skills, visitas repetidas e número de diálogos para de uma sessão.
Ainda segundo o blog, com o serviço é possível “automatizar diferentes facetas da experimentação, desde a randomização do cliente até a navegação de usuários para controlar e tratar versões de skills e exibir análises relacionadas a experimentos em um painel”.
Como caso de uso, a Amazon citou a agência Vocala como um cliente que usou o teste A/B para descobrir que um determinado prompt era 15% mais eficaz para impulsionar conversões pagas. A empresa precisou de menos de duas horas para fazer o teste.
“Analisamos os resultados do nosso experimento por meio de um painel. Depois de algumas semanas, pudemos ver claramente que o prompt mais longo era 15% mais eficaz na geração de conversões pagas”, disse James Holland, desenvolvedor líder de voz da Vocala.
Os testes A/B são uma prática comum no marketing para encontrar as melhores estratégias ou designs de um produto. Ela funciona da seguinte maneira: duas opções de uma ação são implementadas, sendo que um público específico recebe uma outra de forma aleatória.
A partir de como foi a reação das pessoas, é decidido qual das opções será adotada para o público geral. Segundo a Amazon, esses testes A/B na Alexa podem ser concluídos em algumas horas e analisados ao longo de semanas.
Para começar a usar, é preciso fazer login no Alexa Developer Console e escolher qual skill deseja realizar um experimento, depois é só clicar em “Certification”. Lá, procure pela seção “A/B Testing” e escolha a opção “Create”.
