Prós e Contras de Meticulous

Meticulous destaca-se pela sua integração perfeita e facilidade de uso. Não requer configuração complexa ou alterações na nossa infraestrutura existente. Sua compatibilidade com o Vercel melhora nosso fluxo de trabalho, permitindo-nos testar de forma mais abrangente sem o ônus de desenvolver testes extensivos para nossa grande base de código.

Altamente recomendado para equipes que buscam uma solução de teste eficiente e de baixa manutenção. Análise coletada por e hospedada no G2.com.

Inicialmente, encontramos alguns falsos positivos. No entanto, a equipe Meticulous forneceu um excelente suporte, ajudando-nos a resolver esses problemas prontamente, o que foi muito apreciado. Também acredito que eles já resolveram esses problemas para que futuros clientes não os experimentem. Análise coletada por e hospedada no G2.com.

Meticulous.ai realmente se destaca quando se trata de integração com o GitHub. Uma vez configurada a ação, a ferramenta executa automaticamente testes de regressão visual em cada pull request. Se forem encontradas discrepâncias, ela comenta diretamente no PR com um link para as diferenças. Esta automação perfeita simplifica muito o processo de revisão de código e garante que os elementos visuais sejam consistentes em todas as atualizações.

Outro ponto forte é seu recurso de seleção inteligente de testes. Meticulous.ai seleciona automaticamente os testes com base na cobertura de teste, garantindo que as áreas mais críticas do seu aplicativo sejam testadas. Isso elimina a necessidade de manutenção manual de testes, liberando tempo e garantindo que o sistema se concentre nos componentes mais críticos. Análise coletada por e hospedada no G2.com.

Embora o Meticulous seja amplamente eficaz, ele tem algumas áreas para melhoria. A plataforma opera de certa forma como uma "caixa preta", tornando difícil diagnosticar a causa raiz das falhas nos testes. Isso pode tornar a resolução de problemas difícil. Análise coletada por e hospedada no G2.com.

Tentamos de tudo para testes de ponta a ponta e testes de interface do usuário. Isso é 10 vezes melhor do que qualquer outra ferramenta de teste que usamos, de cypress a playwright, a gravadores de navegador e as ferramentas de IA de llm.

Meticulous simplesmente funciona - detecta cada mudança que fazemos, sem qualquer manutenção de nossos desenvolvedores. A equipe de engenharia adora.

Economizou tanto tempo que conseguimos reduzir o número de pessoal de QA e iniciar novos projetos de engenharia com a largura de banda aumentada. Análise coletada por e hospedada no G2.com.

Eles ainda não oferecem suporte para testes em dispositivos móveis. Análise coletada por e hospedada no G2.com.

A coisa mais importante é que não há ônus de manutenção. Isso permite que nossa equipe de engenharia passe menos tempo mantendo e escrevendo testes e mais tempo escrevendo código. A cobertura e a amplitude são amplas, capturou bugs em nosso sistema que teriam sido impossíveis ou exigido um esforço significativo para serem detectados de outra forma.

Também é significativamente menos instável do que qualquer outra ferramenta de teste que usamos, incluindo o Cypress. Análise coletada por e hospedada no G2.com.

Pode levar algum tempo para um desenvolvedor individual se acostumar com o novo fluxo de trabalho de revisar diffs para cada PR em vez de escrever/manter testes. Análise coletada por e hospedada no G2.com.

Economiza horas de engenharia, em um momento em que há uma demanda imensa sobre nossa capacidade de engenharia. Ele detecta bugs exatamente quando são mais fáceis de corrigir: no momento do PR, e nos poupa tempo de escrever ou manter suítes de teste frágeis à medida que nossa interface de usuário muda rapidamente.

Funciona completamente pronto para uso, sem necessidade de intervenção do desenvolvedor. Análise coletada por e hospedada no G2.com.

O sistema requer uma maneira diferente de pensar sobre testes, mas você rapidamente se acostuma e a equipe tem sido muito receptiva a quaisquer problemas que encontramos. Análise coletada por e hospedada no G2.com.

Nossa interface de usuário é bastante complexa, com um grande número de diferentes painéis e um enorme número de configurações. Descobrimos o Meticulous.

Está regularmente identificando bugs em nossa organização sem que precisemos escrever testes. Como nossa cobertura aumentou significativamente sem qualquer tempo de inatividade dos desenvolvedores, isso reduziu nossa necessidade de equipe de QA e Eng. Análise coletada por e hospedada no G2.com.

Levou um tempo para nos organizarmos, embora eu ache que eles melhoraram o processo de integração agora. Análise coletada por e hospedada no G2.com.

Eu adoro que isso me permite realmente enviar novo código front-end para produção sem precisar de 10 minutos de cliques e testes manuais. Também é incrível que a configuração seja toda automática e eu não precise realmente escrever testes. Ele detectou pelo menos 5 bugs no primeiro mês, mas mais importante, me permite entregar mais rápido. Análise coletada por e hospedada no G2.com.

Grandes mudanças redefinem nossas sessões de teste… o que significa que tenho que passar um dia sem Meticulous até que ele construa sessões de teste novas suficientes! Análise coletada por e hospedada no G2.com.

I don’t have to write any tests or worry about testing whatsoever, Meticulous just catches everything for us, much better than when we used cypress. Análise coletada por e hospedada no G2.com.

Nothing so far - I only wish I had found it sooner! Análise coletada por e hospedada no G2.com.

- Muito fácil determinar se a mudança introduziu regressões na interface do usuário

- Aumenta progressivamente a cobertura à medida que construímos mais páginas e recursos

- Não precisa ser gerenciado

- Novos recursos e melhorias lançados continuamente! Análise coletada por e hospedada no G2.com.

O processo de configuração demorou um pouco mais do que o esperado, mas recebi um ótimo suporte da equipe durante todo o tempo. Análise coletada por e hospedada no G2.com.

O fluxo de trabalho está integrado ao nosso CI GitHub, então é fácil para nós revisar as diferenças. Nosso aplicativo é bastante complexo com muitas configurações e, mesmo assim, o Meticulous consegue obter uma cobertura super ampla. Análise coletada por e hospedada no G2.com.

Como qualquer SaaS em crescimento, a equipe está fazendo melhorias contínuas para refinar o produto. Análise coletada por e hospedada no G2.com.