Google BigQuery

BigQuery est l'entrepôt de données de Google qui permet une analyse évolutive des données. Cette intégration permet d'envoyer vos propriétés d'entrée spécifiques, ou toutes, vers BigQuery.

Principales fonctionnalités

La destination Google BigQuery offre les fonctionnalités clés suivantes :

• Structure des events: notre Events reference alimente BigQuery, ce qui signifie que vos données sont correctement mappées aux champs attendus de manière optimisée.

• Prise en charge de schémas multiples: stocker les données d'événement en suivant votre schéma préféré/existant ou nous pouvons vous aider à en créer un universel.

• Contrôle des données: sélectionnez vos propriétés ou cochez simplement une case pour les envoyer toutes à BigQuery.

Configuration de la destination

Assurez-vous BigQuery API est activée. Plus de détails sont disponibles en suivant ce LINK. Utilisez Filtres de destination pour affiner les événements et/ou autres propriétés en fonction de vos besoins spécifiques.

Cette destination accepte tous les schémas, plus précisément :

1. votre schéma de table existant ou,

2. un schéma universel.

La première option est utile pour ceux qui souhaitent utiliser une table existante avec ses colonnes prédéfinies : c'est un scénario courant lorsque vous avez déjà des données stockées et c'est l'option recommandée car elle est rapide à configurer et les données peuvent être consultées directement depuis la colonne spécifique. Pour activer ce mode, dans le Configuration, vous devez simplement activer la Détection automatique de la structure de la table (recommandé) puis procéder à la section Event Property Mapping pour sélectionner les colonnes dans Colonne BigQuery et leurs valeurs dans Your value . La deuxième méthode repose sur un Schéma universel, où toutes vos données (ou propriétés sélectionnées) sont stockées dans une seule colonne sous forme de chaîne JSON et en utilisant la fonction BigQuery PARSE_JSON vous pouvez récupérer des valeurs spécifiques à l'intérieur. Nous vous suggérons de consulter la section Schéma universel avec un guide détaillé sur la façon dont vous pouvez créer le schéma universel et comprendre si c'est la structure de table appropriée pour vous. Pour activer ce mode, dans le Configuration, vous pouvez soit cocher Send all properties to BigQuery with universal schema afin que toutes les propriétés soient incluses ou vous pouvez saisir les propriétés que vous souhaitez envoyer en utilisant la Nom de la propriété table dans la section Properties to include with universal schema .

Configuration

Settings	Description
Authentification	Requis Vos identifiants Google tels que définis dans l'interface Commanders Act en suivant : Administration ➜ Connector Credentials ➜ Ajouter des connector credentials ➜ BigQuery
Project Id	Requis Sélectionnez l'identifiant de votre projet dans le menu déroulant tel qu'indiqué dans la console BigQuery. Plus de détails sont disponibles en suivant ce LINK.
Dataset Id	Requis Sélectionnez l'identifiant de votre dataset tel qu'indiqué dans la console BigQuery. Plus de détails sont disponibles en suivant ce LINK.
Table Id	Requis Sélectionnez l'identifiant de la table tel qu'indiqué dans la console BigQuery. Plus de détails sont disponibles en suivant ce LINK.
Détection automatique de la structure de la table (recommandé)	Cochez cette option pour activer la fonctionnalité de détection automatique de la structure de la table.
Envoyer toutes les propriétés à BigQuery avec schéma universel	Cochez cette option pour envoyer toutes les propriétés à BigQuery suivant un schéma spécifique : voir la section Schéma universel pour plus de détails.
Event property Mapping	Lorsque Détection automatique de la structure de la table (recommandé) est cochée, vous devez mapper vos champs BigQuery en les sélectionnant dans le Colonne BigQuery et définir leurs valeurs dans Your value .
Nom de la propriété [1]	Lorsque les deux Détection automatique de la structure de la table (recommandé) et Send all properties to BigQuery with universal schema ne sont pas cochées, vous pouvez saisir les propriétés que vous souhaitez inclure dans votre table avec schéma universel, une par ligne.

[1] dans la section Properties to include with universal schema .

Schéma universel

Les étapes suivantes ne sont pas requises si vous cochez Détection automatique de la structure de la table (recommandé) .

Lors de la sélection de Send all properties to BigQuery un schéma spécifique est requis. Voir les sous-sections suivantes pour apprendre comment créer un schéma universel. Ceci n'est pas

Dataset

Accès console BigQuery pour localiser votre (1) identifiant de projet et cliquez (2) le trois points à droite. Sélectionnez (3) Créer un dataset dans le menu ou, alternativement, vous pouvez utiliser un dataset existant et passer à la sous-section suivante.

Création de dataset #1.

Saisissez un (4) identifiant de dataset (par ex. "myDatasetId"), sélectionnez un (5) type d'emplacement et cliquez (6) CREATE DATASET.

Création de dataset #2.

Table

Créez une table avec la structure suivante :

Nom du champ	Type	Mode
rawDataCa	String	Requis
createdAt	Timestamp	Requis

La façon la plus simple de la créer est de cliquer (7) le plus bouton :

Composer une nouvelle requête.

copiez et collez la requête suivante dans (8) la zone de saisie :

CREATE TABLE IF NOT EXISTS [PROJECT_ID].[DATASET_ID].[TABLE_ID] (rawDataCa STRING NOT NULL, createdAt TIMESTAMP NOT NULL) OPTIONS(description="CA raw event data stored in Google BigQuery")

Remplacez [PROJECT_ID] , [DATASET_ID] et [TABLE_ID] par votre projet, dataset et identifiant de table respectivement. Vous définissez votre identifiant de table à cette étape.

puis cliquez sur le (9) RUN bouton.

Exécuter la requête de création de table.

Référence rapide

Commanders Act Events	Colonnes de la table BigQuery
[Any events] [1]	rawDataCa, createdAt [2]

[1] Use Filtres de destination pour spécifier vos événements de correspondance. [2] Deux colonnes : rawDataCa contient vos propriétés d'événement, tandis que createdAt est l'horodatage de création.