Optimizely Web Experimentation Avaliações e Detalhes do Produto - Página 2

Tanto a velocidade com que você pode realizar experimentos e mudanças, o que significa que você pode validar muitas hipóteses em um curto espaço de tempo, quanto a capacidade de ter garantias sobre os impactos dos dados (e o cálculo da significância estatística). O editor WYSIWYG ajuda significativamente os membros da equipe com baixa acuidade técnica. Recebi grande ajuda da equipe de suporte ao cliente da Optimizely. Análise coletada por e hospedada no G2.com.

Dependendo da mudança, sua pilha de tecnologia precisa ser capaz de trabalhar com o Optimizely. Alguns dos testes que você sente que poderiam ser facilmente realizados no Optimizely Web, provam ser mais difíceis, e há uma curva de aprendizado razoável para entender o que pode ser viavelmente alcançado na plataforma e o que não pode ser. Análise coletada por e hospedada no G2.com.

Adoro que nos permite rastrear tipos específicos de conversões que podemos definir. Tem relatórios claros que mostram a variante vencedora e funciona bem com uma configuração relativamente mínima. Análise coletada por e hospedada no G2.com.

Eu senti que era necessário mais desenvolvimento em JavaScript para realizar testes em várias páginas e modificações mais avançadas. A ferramenta não gostava que fizéssemos muitas alterações no HTML e preferia que fizéssemos essas modificações com JS. Análise coletada por e hospedada no G2.com.

Tenho usado o Optimizely Web Experimentation há alguns anos. Ele pode lidar com praticamente qualquer experimento que lançamos, tem um mecanismo de relatórios robusto, eles introduzem novos recursos em um ritmo rápido e o desempenho é bom. É uma plataforma eficiente de usar também. A equipe de suporte ao cliente também tem sido muito útil sempre que precisamos deles. Análise coletada por e hospedada no G2.com.

Embora seja principalmente fácil de usar, você precisa de um entendimento básico de seletores CSS e do DOM. Sem esse nível básico, você achará frustrante tentar selecionar o elemento certo para alterar ou medir. Análise coletada por e hospedada no G2.com.

A facilidade de implementar um experimento com o editor WYSIWYG foi muito fácil de entender. A sequência lógica e a seleção de opções para configurar os experimentos também são fáceis de entender.

A equipe de integração e atendimento ao cliente tem sido muito útil para nos configurar.

A instalação do script de rastreamento também levou minutos em vez de uma instalação técnica profunda, o que significa que a integração foi simples. Análise coletada por e hospedada no G2.com.

Configurar métricas é um aspecto que precisa de tempo e atenção - se estas não tiverem sido configuradas corretamente, então o painel de resultados não será útil ao revisar os resultados. Análise coletada por e hospedada no G2.com.

O editor ao vivo que permite personalizações instantâneas é uma ferramenta excepcional. É fácil de implementar, usar e diferente de tudo que já usamos antes. Realmente coloca o poder nas mãos certas e desacopla as dependências de engenharia do processo de experimentação. Além disso, as capacidades de borda são realmente poderosas na entrega de uma experiência otimizada para nossos clientes. Análise coletada por e hospedada no G2.com.

A desvantagem que vimos é do ponto de vista de testes e ter a capacidade de se forçar a uma das variações. Seria ótimo para nossa equipe de QA poder decidir qual versão eles querem e, em última análise, poder testar qualquer versão à sua discrição. Análise coletada por e hospedada no G2.com.

Os pontos positivos são que você pode facilmente colocar experimentos no ar. Eu não tenho experiência em CRO e colocar esses experimentos no ar foi muito simples. O acompanhamento dos resultados e a significância estatística também são muito claros. Gostamos de como podemos testar em diferentes páginas do site, não apenas como um todo, o que um concorrente diferente que costumávamos usar fazia, o que nos limitava. Análise coletada por e hospedada no G2.com.

Uma coisa que descobri é que não posso verificar a receita por visitante no painel, apenas a receita por sessão, o que limita nossos relatórios e precisamos ir ao GA para isso. Análise coletada por e hospedada no G2.com.

- Facilidade de uso

- Forte capacitação para uma ampla variedade de profissionais, especificamente através do Editor Visual

- Tempo de resposta fantástico do suporte

- Acelerou nosso programa de CRO

- Fácil integração em uma ampla gama de projetos do ponto de vista de implementação

- Métricas fáceis de verificar e ler para apresentar a uma variedade de partes interessadas. Facilita o processo de tomada de decisão de uma perspectiva muito mais rápida Análise coletada por e hospedada no G2.com.

- Alguns desafios com o rastreamento entre domínios do EndUserId, mas esse é um caso de uso bastante específico e não é representativo da facilidade geral de implementação. Análise coletada por e hospedada no G2.com.

Há uma ampla gama de testes que posso executar usando a plataforma: A/B, A/B/n, multivariado, multi-arm bandit e 'aceleradores de estatísticas'.

As opções de gatilho permitem que eu segmente facilmente segmentos de clientes discretos por tipo de dispositivo, ou tipo de navegador, ou por outro comportamento específico. Também fiz testes usando JavaScript personalizado para suprimir testes para segmentos de clientes mais sensíveis.

Gosto do painel de relatórios, que é bom para realizar verificações rápidas sobre como testes específicos estão se saindo em diferentes tipos de navegador e dispositivo - e para ver como um teste está se desempenhando ao longo do tempo.

Também gosto do fato de poder configurar um teste para ser implementado em 5% do tráfego, realizar algumas verificações pós-implementação e, em seguida, duplicar rapidamente o teste e implementá-lo para 100% do tráfego elegível.

Os tickets de suporte ao cliente são via e-mail e geralmente recebo uma resposta dentro de algumas horas, o que é bom. Análise coletada por e hospedada no G2.com.

A ferramenta de construção de páginas visuais é bastante básica e poderia se beneficiar de uma atualização. Isso significa que você mais ou menos precisa saber HTML e CSS para construir seus próprios testes simples, e JavaScript para qualquer coisa mais complicada.

Muitos praticantes de CRO usarão probabilidade Bayesiana juntamente com estatísticas Frequentistas se os volumes de tráfego forem menores para testes específicos. O painel de relatórios padrão é a significância estatística - então a abordagem Bayesiana precisa ser incluída. Análise coletada por e hospedada no G2.com.

Há muitas opções de configuração, o que ajuda a garantir que estamos realizando experimentos nas circunstâncias certas ou para os grupos de usuários corretos. Análise coletada por e hospedada no G2.com.

Foi difícil de implementar, e é bastante sensível a diferentes ambientes técnicos. Isso pode resultar em tempos de implantação prolongados e muitas chamadas com várias equipes da Optimizely. Análise coletada por e hospedada no G2.com.

Optimizely continua crescendo e amadurecendo a funcionalidade de recursos. Integrações com meu backend, trechos de código para ir no GTM e disposição para deixar um plano para as pessoas seguirem dentro da organização é útil. Análise coletada por e hospedada no G2.com.

A parte mais difícil é entrar no pré-teste e personalização em uma cultura onde as pessoas se servem. Esse é o estágio em que minha organização se encontra agora e, embora eu esteja confiante de que há apoio para nos ajudar a chegar lá, o desafio de explicar o valor dos testes permanece. Análise coletada por e hospedada no G2.com.