Spécification d'événement

Dans le Event Specification interface, vous pourrez définir le schéma de vos données et déterminer les actions à entreprendre si un événement ne respecte pas vos event specifications (aka validation rules)

Ajouter des event specifications vous permet de définir le payload et ce qui est attendu, afin que vous puissiez voir si les données respectent ces spécifications en cas d’erreurs.

Puis, dans la vue Source data quality vous pouvez définir une alerte automatique ou voir le résumé de toutes les violations de spécifications, afin de les corriger à la source ou avec le live Data Cleansing fonctionnalité

Vous pouvez choisir d’ajouter un standard event (depuis le event catalog) ou une specification personnalisée.

Le schéma des événements standard est déjà défini, mais vous pouvez le modifier en ajoutant davantage de propriétés (propriétés standard ou personnalisées).

Créer une propriété personnalisée

Vous pouvez créer des propriétés personnalisées et les ajouter à votre event specification.

Précisez le type de données

• String : type le plus utilisé, correspond à un format texte (ex : name = 'ABC')

• Number : correspond à un nombre (float, entier) (ex : value = '12')

• Boolean : la propriété ne peut prendre que 2 valeurs, true ou false (ex : paid = 'true')

• Object : correspond à un tableau de valeurs (ex : items = shirt, pant, shoes)

Précisez le type de structure

• Défaut (valeur simple) : structure la plus utilisée, correspond à une valeur unique. (ex : name = 'ABC')

• List (array of values) : liste de toutes les valeurs sur la propriété (ex : items = shirt, pant, pant)

• Set (array of unique values) : liste de valeurs uniques (ex : items = shirt, pant)

Option PII

Vous pouvez définir votre propriété comme « Personal Identifiable Information (PII) », ce qui signifie que cette propriété contient des informations personnelles pouvant identifier un utilisateur (adresse e-mail, adresse postale, Customer ID…).

Si cette option est définie sur true, la propriété sera considérée comme PII.

Si cette propriété est stockée et marquée comme PII, elle sera automatiquement chiffrée en AES-256 avant d’être écrite dans la base de données.

Actions des règles de validation

Vous pouvez définir des réponses sur mesure aux scénarios de validation des données :

• Propriété requise manquante : Choisissez soit d’accepter soit de rejeter complètement les événements lorsqu’une propriété requise est manquante.

• Format de valeur inattendu : Configurez le système soit pour omettre les propriétés qui ne correspondent pas au format attendu, soit pour accepter/rejeter l’événement entièrement.

• Événements non spécifiés : Vous avez la possibilité d’accepter des événements qui ne sont pas prédéfinis dans votre schéma. Vous pouvez aussi décider si cette action doit déclencher un avertissement dans le rapport Source Data Quality.

• Propriétés non spécifiées : Décidez d’omettre les propriétés non définies ou de les accepter, avec ou sans avertissements.