Avaliações e Detalhes do Produto de ProdPerfect

ProdPerfect foi exatamente o que precisávamos como uma pequena empresa de software que não queria contratar um engenheiro de QA front-end em tempo integral.

A integração foi fácil porque o software deles mediu automaticamente o fluxo de usuários em nosso aplicativo web, que é então usado para criar casos de teste.

A equipe da ProdPerfect criou os casos de teste e os colocou em funcionamento sem muita contribuição minha.

Uma vez que os testes estavam operacionais, realizamos uma série de reuniões semanais altamente eficazes para discutir o uso do sistema, problemas de teste e novos casos de teste.

Minha conclusão é que alcançamos mais do que teríamos com um engenheiro de QA em tempo integral, por cerca de 50% do preço de um engenheiro offshore (em relação aos EUA). Análise coletada por e hospedada no G2.com.

A equipe do ProdPerfect tem um bom entendimento do que é necessário no roteiro.

Em geral, seria ideal que os casos de execução de teste fossem executados em paralelo com execuções sem dependência. Isso é algo em que eles têm trabalhado, mas ainda não está pronto. Não ter esse recurso significa que o teste de cada caso é feito em série, o que leva mais tempo e há alguns desafios de relatório com falhas. Por exemplo, o ambiente JavaScript não está ciente de qual caso de teste está sendo executado, então o ID do caso de teste não pode ser incluído nos relatórios de registro (por exemplo, Sentry). Análise coletada por e hospedada no G2.com.

A medição contínua do nosso produto e a criação e manutenção automáticas de casos de teste E2E à medida que desenvolvemos novas funcionalidades é o que mais gostamos no ProdPerfect. O ProdPerfect provou que pode encontrar falhas inesperadas em nossos ambientes de integração antes de implantarmos em produção. Análise coletada por e hospedada no G2.com.

Não há muitas desvantagens no ProdPerfect. Dependendo das suas necessidades, seus casos de teste podem depender de contas de usuário estabelecidas e dados pré-existentes. Esse requisito pode vincular seus testes a um ambiente de teste específico e pré-preparado. O ProdPerfect permite testes ilimitados em qualquer ambiente de teste, mas você precisa lidar com a duplicação do ambiente por conta própria. Para nós, isso não é um grande problema, mas adoraríamos executar o ProdPerfect em todos os nossos ambientes de teste de forma eficiente. Análise coletada por e hospedada no G2.com.

ProdPerfect ajudou nossa equipe de engenharia a se mover ainda mais rápido. Nossa cobertura de testes de regressão agora é baseada em padrões de uso reais e está sendo regularmente atualizada e monitorada, além de estar muito bem integrada ao nosso pipeline de CI/CD. Conseguimos executar toda a suíte de testes em qualquer ambiente de forma bastante fácil e em tempo hábil. Se e quando os testes falham, é fácil depurar e encontrar a causa. O atendimento ao cliente e o suporte da ProdPerfect são de primeira qualidade. Análise coletada por e hospedada no G2.com.

Em alguns casos raros, há falsos alarmes, mas isso é esperado de ferramentas automatizadas. Prefiro ter falsos alarmes ocasionais do que deixar um defeito ou um bug ir para a produção. Análise coletada por e hospedada no G2.com.

A equipe do ProdPerfect é extremamente responsiva a todos os nossos pedidos. O processo de automação foi um pouco lento no início, principalmente por causa de problemas de acesso ao ambiente do nosso lado, mas uma vez que esse problema foi resolvido, eles automatizaram 65% dos cenários mais usados em um período de tempo muito curto. A suíte de testes está integrada com o pipeline CI/CD. O tempo de execução é perfeito para nós, levando apenas 15 minutos. Mesmo que a suíte de testes cresça, já temos uma solução para manter a execução de 15 minutos como nosso padrão. Análise coletada por e hospedada no G2.com.

Eu não posso dizer que não gosto de algo no produto, mesmo que fosse muito cru no início, a equipe da ProdPerfect o melhorou tremendamente em um curto período de tempo. Estou realmente ansioso por melhorias no lado dos testes que falham. Seria muito bom ver os passos do teste na execução do teste com todos os dados de degustação. Análise coletada por e hospedada no G2.com.

Eu adoro a comunicação e explicação da ProdPerfect. Sempre que tenho uma dúvida, ela é respondida de forma oportuna. Análise coletada por e hospedada no G2.com.

Eu não gosto de nenhuma parte do ProdPerfect. Se eu tiver alguma dúvida, elas são respondidas imediatamente. Análise coletada por e hospedada no G2.com.

É simples conceber organizar planilhas no painel principal em segundos - mantemos uma visão ideal de ciclos contínuos e arranjos que estamos planejando. Responder aos representantes funciona perfeitamente. Análise coletada por e hospedada no G2.com.

Os testes são úteis, no entanto, na eventualidade de ter clientes em vários países, você frequentemente tem o problema de ter alguns relatórios traduzidos em várias partes, mas alguns relatórios estão apenas em inglês. Análise coletada por e hospedada no G2.com.

Eu aprecio profundamente que a ProdPerfect use um pixel de rastreamento para determinar os fluxos de usuários e como os usuários interagem em nosso site para desenvolver os testes baseados em navegador. Historicamente, a pior parte de trabalhar com uma equipe de QA terceirizada tem sido educá-los sobre quais fluxos importam e mantê-los informados sobre as mudanças em nossa aplicação. Com a ProdPerfect, eles estão em cima disso, integrados em nosso canal do Slack e comunicando-se regularmente quando há algo que podemos trabalhar juntos para resolver antes que chegue à produção. Análise coletada por e hospedada no G2.com.

Há um relatório de visualização de dados que me mostra como o ProdPerfect vê os usuários interagindo com elementos da página, navegação e o caminho que os usuários estão seguindo pelo site. Não é muito intuitivo e um pouco avassalador, mas felizmente, quando fui apresentado a essa página, o ProdPerfect me informou que estava lá apenas para meu entretenimento - eles cuidariam de interpretar essa informação e monitorar as coisas. Também ouvi dizer que eles estão trabalhando em uma interface mais amigável para essa informação - o que seria legal ter. Análise coletada por e hospedada no G2.com.

- Ele determina os testes a serem escritos monitorando cliques e tráfego, resultando em um esforço mínimo de configuração de nossa parte e caminhos eficazes para testar.

- Ele escreve e mantém completamente os testes – inteiramente sem intervenção de nossa equipe de engenharia.

- Os testes são de alta qualidade e eficazes – detectou alguns problemas que teriam afetado fluxos de trabalho de produção importantes.

- Podemos colocá-los em qualquer lugar que quisermos em nossos pipelines – temos controle total.

- Ótimo suporte e comunicação da equipe deles – profissional, rápido para responder, amigável.

- Muito, muito mais barato do que fazer isso nós mesmos, seja contratando QA ou fazendo com que os engenheiros mudem de contexto para isso. Análise coletada por e hospedada no G2.com.

- Não tanto uma aversão, mas seria bom ter um painel um pouco mais completo para observar o desempenho dos testes ao longo do tempo e métricas relacionadas. Análise coletada por e hospedada no G2.com.

Nossos desenvolvedores não precisam mais escrever e manter os testes de ponta a ponta que os tornavam menos eficientes. Além disso, os testes e2e da ProdPerfect são melhores e cobrem mais casos, e são atualizados mais rapidamente. Muito melhor do que fazer nós mesmos. Análise coletada por e hospedada no G2.com.

A atualização de testes nos fins de semana/fora do horário não acontece, então você às vezes fica preso sem poder mesclar nos fins de semana se tiver alterações na interface. Análise coletada por e hospedada no G2.com.

Usamos o Prodperfect como parte do nosso pipeline CI/CD - usamos como uma medida provisória para proteger nosso ambiente de produção, antes de implantar, executamos o conjunto de testes do Prodperfect - se falhar (significando que fizemos algo errado no nosso código de aplicação), então a implantação em produção nunca acontece.

Isso nos dá um nível extremamente alto de confiança de que podemos desenvolver e implantar com segurança para nossos usuários. Análise coletada por e hospedada no G2.com.

Honestamente nada - a equipe é ótima, eles não vendem um produto para você - eles formam uma parceria com você e no espaço tecnológico há tantas pessoas tentando vender tantas coisas para você - este é um benefício revigorante de trabalhar com eles. Análise coletada por e hospedada no G2.com.