Recomendações a outras pessoas considerando Google BigQuery Data Transfer Service:
Se você vem de uma mentalidade tradicional de banco de dados SQL, entenda que o BigQuery NÃO é um banco de dados padrão e pode incluir "recursos" que você precisa contornar. Por exemplo, se você tiver uma tabela e uma coluna nessa tabela com o mesmo nome, ao importar para o BigQuery, ele aninhará a tabela inteira em vez de apenas importar essa coluna nos seus resultados. Análise coletada por e hospedada no G2.com.
Que problemas é Google BigQuery Data Transfer Service E como isso está te beneficiando?
Estamos usando o BigQuery como um armazém para o Fivetran. Os dados são importados e transformados ao longo do caminho, então também estamos usando o BigQuery para verificar e testar essas transformações. Quando satisfeitos, movemos os dados do BigQuery para um banco de dados PostGRES usando Node.js e um SDK do NPM. Do ponto de vista de conexão a partir de fontes personalizadas como o Node, achamos que o BigQuery é, novamente, fácil de usar e trabalhar. Análise coletada por e hospedada no G2.com.