Statsig torna muito fácil analisar os resultados. Os gráficos que eles fornecem são fáceis de ler e você pode clicar em cada métrica para obter insights adicionais, gráficos e significância estatística. Com um rápido olhar, você pode ver o que está acontecendo com o experimento. Análise coletada por e hospedada no G2.com.
Eu acho algumas das características ao submeter um experimento bastante confusas. Por exemplo, os campos de duração de alocação, duração de coorte e tempo total do experimento não são claros. Além disso, a maioria dos nossos experimentos nós analisamos uma semana após a alocação e não há opção para fazer isso no Statsig. Análise coletada por e hospedada no G2.com.
108 de 109 Avaliações Totais para Statsig
Sentimento Geral da Revisão para Statsig
Entre para ver o sentimento das avaliações.
The most important features are very useful and well thought, and I've never faced a moment where Statsig wasn't able to perform a specific test I wanted to. I also like how the app is very nice and intuitive and how the documentation is very deeply explanatory in case of doubt. Análise coletada por e hospedada no G2.com.
I don't like how they put all primary metrics in all new experiments. Some experiments are very different from each other and I want to watch very different metrics. In particular, I believe that if I create an experiment based on a template or if I clone an experiment, I expect it's primary metrics to come just like the source, and not to be all repopulated again. Análise coletada por e hospedada no G2.com.
The Statsig process was great. We booked a call and walked through the introduction of the platform. As the process progressed, I was able to ask more technical quetstions to the solutions engineer during each of our calls. Statsig has a series of YouTube videos that, while a bit out of date, can get a team up to speed relatively quickly.
Once we signed contracts, Statsig offered an a la carte learning solution for each of the various cohorts who would be using the platform. We're only using it for feature flagging and experimentation, but it's easy to get up to speed with those feature sets and setup was easy to integrate into our system using the Ruby SDK and a custom wrapper.
Turning on an experiment, and seeing those results come in, is relatively straight forward, and data (which we send to Statsig via a third-party connection) generally updates every day or so, but sometimes more frequently. It's easy to see clear winners and losers, and you're able to filter for specific things like custom analytics values. The team also integrates directly into Slack as a first line of communication. Análise coletada por e hospedada no G2.com.
It takes some time to wrap your head around what the platform is doing and how you're supposed to set things up. The idea of Layers took some time to process, along with how to register analytics events for more granular visibility in an experiment. I think it's just the price of learning new software. Statsig employees were available to answer questions, and documentation is generally good. Análise coletada por e hospedada no G2.com.
Statsig superou minhas expectativas! Nossa empresa nunca tinha feito nenhum tipo de teste antes, e quando estávamos analisando plataformas, era difícil saber o que precisávamos. Mas a equipe da StatSig estava super disposta a trabalhar conosco no preço do contrato e nos ajudar na configuração e implementação. Eles são super receptivos a qualquer dúvida que temos, seja uma questão de implementação técnica ou uma dúvida sobre como explicar algo complicado a um stakeholder. A ferramenta em si tem sido ótima - é fácil de usar, o que realmente ajudou na adoção entre a equipe e a começar a construir mais uma cultura de testes em nossa empresa. A equipe deles também é muito receptiva a pedidos de recursos e realmente implementa o feedback em seu roteiro - muitas empresas dizem que farão isso durante o processo de vendas, mas nunca cumprem. Eu recomendaria StatSig para qualquer empresa que esteja começando com experimentação e testes! Análise coletada por e hospedada no G2.com.
A única desvantagem que consigo pensar é que é apenas uma plataforma de experimentação, então tenho que usá-la separadamente das nossas outras ferramentas de análise de produtos. Mas isso não tem sido um verdadeiro ponto de dor! Análise coletada por e hospedada no G2.com.
+ Funciona e é confiável.
+ Está bem documentado.
+ Muitos adaptadores (React/Vanilla JS, HTML, etc...)
+ O recurso de experimentos é muito bom
+ A integração é super fácil Análise coletada por e hospedada no G2.com.
- A documentação do SDK está errada (diz "env" em vez de StatSig env) - causou um bug do nosso lado.
- Não é possível adicionar descrição aos portões de recursos - quando uma empresa cresce e trabalha em várias coisas, os desenvolvedores podem não saber no que outras pessoas estão trabalhando.
- Não é possível excluir em massa os portões de recursos - é necessário entrar nos portões um por um e excluí-los.
- O SDK não suporta inicialização preguiçosa ou atualização. Análise coletada por e hospedada no G2.com.
As a data scientist, Statsig makes it incredibly easy to handle everything from metric breakdowns to performance tracking and experiment setup. I'm truly impressed by how it allows me to analyze all experiments in one place, with just the click of a button.
What's even more helpful is that Statsig doesn't just support setting up and analyzing experiments—it also lets you import and analyze experiments run outside the platform. This feature is a game-changer, making it seamless to get insights from experiments, no matter where they were conducted. Análise coletada por e hospedada no G2.com.
The UI could be improved. For first-time users, it can be a bit challenging to understand why certain actions aren't working as expected. For example, some buttons are greyed out on certain screens, and it's not always clear how to proceed. It feels a bit like a trial-and-error process. Análise coletada por e hospedada no G2.com.
I've used other experimentation platforms before from Meta's "Deltoid" platform to one I built myself in python... Statsig far surpasses the other platforms out there in terms of both ease of use and flexibility. It has been a game changer for experimentation across my company. The whole process is now seamless, from adding new metric sources & metrics, setting up scorecards for new experiments, and diving into more detailed analysis with things like days-since-first-exposure view & metric results split by user dimensions. Análise coletada por e hospedada no G2.com.
There are a lot of options to pick from for metric types, experiment settings, etc. This provides a TON of flexibility in how you analyze experiments, which is great. But the number of choices can be a bit daunting when you are newly onboarding! So definitely ask questions to the Statsig support team, and they will promptly give you advice to help you with any choice you are making. Análise coletada por e hospedada no G2.com.
Statsig é uma ferramenta muito poderosa para coletar métricas necessárias para tomar decisões informadas relacionadas a testes A/B. Ela possui praticamente tudo o que você precisaria de um conjunto de análises também - nossa equipe acha muito mais fácil construir painéis e extrair informações do que algo como o Google Analytics.
O suporte é de primeira qualidade e o canal do Discord é muito ativo. Análise coletada por e hospedada no G2.com.
Seria bom se as propriedades do evento pudessem ser arrays/objetos, agora estamos presos a strings/inteiros - então, se quiséssemos retornar propriedades mais complexas para o evento, isso seria limitado.
Eu contorno isso passando strings json e depois filtro com contém string. Análise coletada por e hospedada no G2.com.
Precisa melhorar os detalhes de como fazer a integração, incluindo alguns códigos de exemplo e tornando mais claro como a parte dos logs funciona, separada dos ambientes de desenvolvimento e produção.
Além de recomendações ou dicas sobre como criar logs focados nas jornadas dos usuários. Análise coletada por e hospedada no G2.com.
Até agora, tem sido difícil aprender sem ter que consultar a documentação, então não é uma ferramenta muito técnica. Estamos migrando do Mixpanel, e lá há uma certa facilidade de fazer as coisas que ainda não encontramos nesta migração. Mas poderia haver uma aba de exemplos ou algo assim, sem ter que sair do painel e que seria rápido de consultar, como vídeos curtos. Análise coletada por e hospedada no G2.com.
Statsig was very easy for my team to transition to from our old experiment platform, and the transition was immediately worth it as I was blown away by the performance increases, both in the user interface and in how quickly exposures were resolved. The user interface is beautiful and makes me look forward to setting up and checking the status of my experiments, and some of the easter eggs like the musical graphs feature show how much attention to detail the team has spent on making this the friendliest possible dashboard. It is easy for me to set up experiments and feature gates on their portal, as well as easy to implement them in my codebase. I find myself using Statsig as often as I can now. Análise coletada por e hospedada no G2.com.
Even though the transition was easy, there were some things that took getting used to when coming from our old experiment platform, and we needed to deal with some quirks during the transition time when we were using two experiment platforms at the same time as we were transitioning. Análise coletada por e hospedada no G2.com.
Como desenvolvedor de cliente, o StatSig é muito intuitivo de usar, reduzindo muito a configuração padrão com modelos de experimentos. Meu recurso favorito é a facilidade de substituir atribuições de experimentos para correção de bugs em vários ambientes. Isso definitivamente aumentou nossa velocidade ao testar e lançar experimentos. Análise coletada por e hospedada no G2.com.
Uma área de melhoria seria a interface do usuário para revisar/aprovar mudanças em experimentos. Houve algumas mudanças feitas recentemente, então é bom ver que esta é uma área de foco para a equipe da StatSig. Análise coletada por e hospedada no G2.com.
