AWS glue has been a game changer for me. We've been utilizing the Glue Schema Registries, it provides versioning of schema, which wasn't available when we were dealing with Pub/Sub Schema. Análise coletada por e hospedada no G2.com.
Unfortunately the Glue client is available only in Java. Particularly for the SerDe operations on our Avro Data. Análise coletada por e hospedada no G2.com.
- Fácil configurar a conexão do Glue para o GCP para começar a carregar dados de tabelas do Bigquery para o AWS Glue
- Usamos para trazer os dados do GA que somam múltiplos gigabytes e processá-los usando Pyspark no AWS Glue Análise coletada por e hospedada no G2.com.
Não enfrentei nenhum problema ao configurar ou usar o AWS Glue Connector para o Google BigQuery, mas ter mais detalhes e documentação atualizada seria uma boa maneira de melhorá-lo. Análise coletada por e hospedada no G2.com.