Spécification d'événement

Dans le Event Specification interface, vous pourrez définir le schéma de vos données et déterminer les actions à effectuer si un événement ne conforme pas vos spécifications d'événement (alias règles de validation)

Ajouter des event specifications vous permet de définir le payload et ce qui est attendu, afin que vous puissiez voir si les données respectent ces spécifications, en cas d'erreurs.

Ensuite, dans la vue Source data quality vous pouvez définir une alerte automatique ou voir le résumé de toutes les violations de spécifications, afin de les corriger à la source ou avec le live Data Cleansing fonctionnalité

Vous pouvez choisir d'ajouter une standard event (depuis le event catalog) ou une spécification personnalisée.

Le schéma des événements standards est déjà défini, mais vous pouvez le modifier en ajoutant davantage de propriétés (propriétés standard ou personnalisées).

Créer une propriété personnalisée

Vous pouvez créer des propriétés personnalisées et les ajouter à votre event specification.

Préciser le type de donnée

• String : type le plus utilisé, correspond à un format texte (ex : name = 'ABC')

• Number : correspond à un nombre (float, entier) (ex : value = '12')

• Boolean : la propriété ne peut prendre que 2 valeurs, true ou false (ex : paid = 'true')

• Object : correspond à un tableau de valeurs (ex : items = shirt, pant, shoes)

Préciser le type de structure

• Défaut (valeur simple) : structure la plus utilisée, correspond à une valeur unique. (ex : name = 'ABC')

• Liste (array de valeurs) : liste de toutes les valeurs de la propriété (ex : items = shirt, pant, pant)

• Set (array de valeurs uniques) : liste de valeurs uniques (ex : items = shirt, pant)

Option PII

Vous pouvez définir votre propriété comme « Personal Identifiable Information (PII) », signifiant que cette propriété contient des informations personnelles pouvant identifier un utilisateur (adresse e-mail, adresse postale, Customer ID...).

Si cette option est définie sur true, la propriété sera considérée comme PII.

Si cette propriété est stockée et définie comme PII, elle sera automatiquement chiffrée en AES-256 avant d'être écrite dans la base de données.

Actions des règles de validation

Vous pouvez définir des réponses sur mesure aux scénarios de validation des données :

• Propriété requise manquante : Choisissez d'accepter ou de rejeter entièrement les événements lorsqu'une propriété requise est manquante.

• Format de valeur inattendu : Configurez le système soit pour omettre les propriétés qui ne correspondent pas au format attendu, soit pour accepter/rejeter l'événement entièrement.

• Événements non spécifiés : Vous avez la possibilité d'accepter des événements qui ne sont pas prédéfinis dans votre schéma. Vous pouvez également décider si cette action doit déclencher un avertissement dans le rapport Source Data Quality.

• Propriétés non spécifiées : Décidez d'omettre les propriétés non définies ou de les accepter, avec ou sans avertissements.