Modelo de ingestão Snowflake Connector for Google Analytics Aggregate Data¶

Estratégia de ingestão¶

O conector usa dois modos de ingestão:

• O carregamento inicial de dados ocorre logo após a configuração do relatório. O carregamento inicial bem-sucedido termina com os dados ingeridos de uma data de início escolhida até hoje.

• O carregar contínuo de dados começa após a conclusão do carregamento inicial. Atualizações incrementais ocorrem em um cronograma regular escolhido.

A ingestão de cada relatório é um processo independente. Os processos de ingestão podem ser realizados em paralelo.

Consul Configuração da ingestão de dados para sua instância do Snowflake Connector for Google Analytics Aggregate Data para saber como configurar um relatório ou escolher um cronograma de sincronização e uma data de início.

Monitoramento da ingestão¶

Os metadados de ingestão estão disponíveis na exibição CONNECTOR_STATS. Saiba mais: Monitoramento do Snowflake Connector for Google Analytics Aggregate Data.

SELECT * FROM PUBLIC.CONNECTOR_STATS ORDER BY COMPLETED_AT DESC;

A coluna METADATA contém, entre outras coisas, o corpo de solicitação que foi enviado em uma solicitação à API Google Analytics Data. O corpo de solicitação contém informações sobre startDate e endDate.

A coluna STATUS pode ser igual a um dos seguintes valores:

• COMPLETED – uma ingestão bem-sucedida.

• CANCELED – o comprimento do intervalo foi encurtado e a ingestão continuará com intervalos de datas ajustados.

• FAILED – a ingestão falhou e não foi continuada.

Para receber notificações por e-mail sobre execuções de ingestão com falha, defina alertas. Saiba mais: Gerenciamento do Snowflake Connector for Google Analytics Aggregate Data.

Sobre amostragem¶

Amostragem é o processo de selecionar e analisar um subconjunto de dados de um conjunto de dados maior para extrapolar o resultado. Isso significa que a amostragem diminui a qualidade dos dados. A qualidade dos dados depende do número de amostras usadas no processo. Para obter mais informações, consulte Amostragem do Google Analytics.

SELECT d.date, d.raw, d.last_update_date, cs.metadata:samplingMetadata:samplesReadCount::INTEGER as samplesReadCount, cs.metadata:samplingMetadata:samplingSpaceSize::INTEGER as samplingSpaceSize, samplesReadCount/samplingSpaceSize as ratio
FROM <destination_table> as d
LEFT JOIN <connector_stats_view> as cs
ON d.ingestion_run_id = cs.run_id
WHERE cs.metadata:samplingMetadata:samplingOccurred::BOOLEAN = true;

SELECT d.date, d.raw, d.last_update_date, cs.metadata:samplingMetadata:samplesReadCount::INTEGER as samplesReadCount, cs.metadata:samplingMetadata:samplingSpaceSize::INTEGER as samplingSpaceSize, samplesReadCount/samplingSpaceSize as ratio
FROM google_analytics_aggregate_data_dest_db.google_analytics_aggregate_data_dest_schema.report_1__raw as d
LEFT JOIN snowflake_connector_for_google_analytics_aggregate_data.public.connector_stats as cs
ON d.ingestion_run_id = cs.run_id
WHERE cs.metadata:samplingMetadata:samplingOccurred::BOOLEAN = true;