Intégrer vos données dans Microsoft Dataverse

L'intégrateur de données (pour les administrateurs) est un service d'intégration point à point utilisé pour intégrer des données dans Dataverse. Il prend en charge l’intégration des données entre les applications de finances et d’opérations et Dataverse. Il gère également l’intégration de données dans les applications de finances et d’opérations et Dynamics 365 Sales. Ce service est généralement disponible depuis juillet 2017.

Utiliser l’intégrateur de données pour votre entreprise

Data Integrator (pour les administrateurs) prend également en charge les scénarios d’intégration basée sur les processus, comme Prospect to Cash, qui fournissent une synchronisation directe entre les applications de finances et d’opérations et Dynamics 365 Sales. Les modèles Du prospect à l’encaissement disponibles avec la fonctionnalité d’intégration de données activent le flux de données pour les comptes, les contacts, les produits, les devis de vente, les commandes client et les factures client entre les applications de finances et d'opérations et Sales. Même si les données circulent entre les applications de finances et d’opérations et Sales, vous pouvez réaliser des activités de vente et marketing dans Sales, et vous pouvez gérer la réalisation de commande en utilisant la gestion des stocks dans les applications de finances et d’opérations.

L’intégration de prospect à disponibilités permet aux commerciaux de gérer et de surveiller leurs processus de vente avec la puissance de Dynamics 365 Sales, tandis que tous les aspects du traitement et de la facturation se produisent à l’aide de la fonctionnalité enrichie dans les applications de finances et d’opérations. Avec l’intégration de Microsoft Dynamics 365 Prospect to Cash, vous bénéficiez de la puissance combinée des deux systèmes.

Pour plus d’informations sur l’intégration du prospect en disponibilités, voir la documentation sur la Solution Prospect en disponibilités.

L’intégration de Field Service et l’intégration de PSA (Project Service Automation) sont également prises en charge pour l’intégration des données.

Plateforme d’intégrateur de données

Data Integrator (pour les administrateurs) se compose de la plateforme d’intégration des données, de modèles prêts à l’emploi fournis par nos équipes d’applications (par exemple, les applications de finances et d’opérations et Dynamics 365 Sales) et de modèles personnalisés créés par nos clients et nos partenaires. Nous avons créé une plateforme sans application spécifiée qui peut évoluer dans plusieurs sources. Au cœur de celui-ci, vous créez des connexions (aux points de terminaison d’intégration), choisissez l’un des modèles personnalisables avec des mappages prédéfinis (que vous pouvez personnaliser davantage) et créez et exécutez le projet d’intégration de données.

Les modèles d’intégration servent de blueprint avec les entités prédéfinies et les mappages de champ pour activer le flux des données de la source à la destination. Il vous permet également de transformer les données avant de les importer. Plusieurs fois, le schéma entre les applications sources et destinations peut être différent et un modèle avec des entités prédéfinies et des mappages de champs sert de point de départ idéal pour un projet d’intégration.

Configurer un projet d’intégration de données

Trois principales étapes :

1. Créer une connexion (fournissez les informations d’identification aux sources de données).

2. Créer un ensemble de connexion (identifiez les environnements des connexions créées à l’étape précédente).

3. Créer un projet d’intégration de données à l’aide d’un modèle (créez ou utilisez les mappages prédéfinis pour une ou plusieurs entités).

Après avoir créé un projet d’intégration, vous avez la possibilité d’exécuter le projet manuellement et de configurer une actualisation basée sur la planification pour l’avenir. Le reste de cet article examine ces trois étapes.

Créer une connexion

Avant de pouvoir créer un projet d’intégration de données, vous devez configurer une connexion pour chaque système que vous avez l’intention d’utiliser avec le portail Microsoft Power Apps. Réfléchissez à ces connexions en tant que vos points d’intégration.

1. Accédez à Power Apps.

2. Dans le volet de navigation gauche, sélectionnez Connexions, puis Nouvelle connexion. Si l’élément n’est pas dans le volet de navigation gauche, sélectionnez Plus pour le trouver.

3. Vous pouvez sélectionner une connexion dans la liste des connexions ou rechercher votre connexion.

4. Après avoir sélectionné votre connexion, sélectionnez Créer. Vous êtes alors invité à entrer les informations d’identification.

5. Une fois que vous avez fourni vos informations d’identification, la connexion est répertoriée sous vos connexions.

Créer un jeu de connexions

Les ensembles de connexion est un ensemble de deux connexions, d’environnements de connexions, d’informations de mappage d’organisation et de clés d’intégration pouvant être réutilisés entre des projets. Vous pouvez commencer à utiliser un ensemble de connexions pour le développement puis basculer vers un autre pour la production. Une information clé stockée dans un ensemble de connexions est les mappages d’unité d’organisation, par exemple, les mappages entre l’entité juridique des applications de finances et d’opérations (ou la société) ou les divisions et l’organisation Dynamics 365 Sales. Vous pouvez stocker plusieurs mappages d’organisation dans un ensemble de connexions.

1. Connectez-vous au Centre d’administration Power Platform.

2. Sélectionnez Gérer dans le volet de navigation.

3. Dans le volet Gérer , sélectionnez Intégration des données. La page d’intégration des données s’affiche.

4. Sélectionnez l’onglet Ensembles de connexions et sélectionnez Nouvel ensemble de connexions. Le volet Nouveau jeu de connexions s’affiche.

5. Fournissez un nom pour votre ensemble de connexion.

6. Choisissez la connexion que vous avez créée précédemment et sélectionnez l’environnement approprié.

7. Répétez l’étape précédente en choisissant votre prochaine connexion et votre environnement.

8. Spécifiez le mappage de l'organisation aux unités commerciales (si vous effectuez une intégration entre des applications financières et opérationnelles et des systèmes de vente).

   Remarque

   Vous pouvez spécifier plusieurs mappages pour chaque ensemble de connexion.

9. Une fois tous les champs terminés, sélectionnez Enregistrer.

Vous voyez le nouveau jeu de connexions que vous avez créé sous l’onglet Jeux de connexions . Votre jeu de connexions est prêt à être utilisé dans différents projets d’intégration.

Créer un projet d’intégration de données

Les projets activent les flux de données entre systèmes. Un projet contient les mappages d’un ou de plusieurs entités. Les mappages indiquent quel champ mapper à quel autre champ. Pour créer un projet d’intégration de données, procédez comme suit :

1. Sélectionnez l’onglet Intégration des données dans le volet de navigation gauche.

2. Dans l’onglet Projets , sélectionnez Nouveau projet.

3. Fournissez un nom pour votre projet d’intégration.

4. Sélectionnez l’un des modèles disponibles (ou créez votre propre modèle).

5. Sélectionnez Suivant et choisissez une connexion créée précédemment (ou créez un ensemble de connexions).

6. Vérifiez que vous avez choisi la bonne en confirmant les noms de connexion et d’environnement.

7. Lisez et acceptez l’avis de confidentialité et donnez votre consentement à l’écran suivant.

8. Sélectionnez Suivant puis choisissez l’entité juridique des mappages de division.

9. Lisez et acceptez l’avis de confidentialité et donnez votre consentement à l’écran suivant.

10. Continuez à créer le projet, puis exécutez-le afin d’exécuter le projet.

    Vous verrez plusieurs onglets ( l’historique de planification et d’exécution), ainsi que certains boutons – Ajouter une tâche, actualiser des entités et une requête avancée – qui sont décrits plus loin dans cet article.

Afficher l’historique d’exécution

Chaque fois que vous exécutez un projet, manuellement ou planifié, il génère un journal détaillé, qui affiche le nom du projet, l’horodatage mis à jour en dernier, ainsi que l’état. Vous pouvez afficher cela sous l’historique d’exécution de chaque projet. L’historique d’exécution du projet est conservé pendant 45 jours après quoi il est automatiquement vidé.

L’historique des exécutions montre également l’état de l’exécution ainsi que le nombre d’upserts et d’erreurs.

• Pour les échecs d'exécution, vous pouvez approfondir pour analyser la cause profonde.

• Si l’exécution du projet est dans l’état « ERROR », elle effectue une nouvelle tentative d’exécution lors de l’exécution planifiée suivante.

• Si l’exécution du projet est dans l’état « WARNING », vous devez résoudre les problèmes sur la source. Le projet relance l'exécution à la prochaine exécution programmée.

• Exemple d’exécution réussie, affichant le statut comme terminé avec # upserts. Il s'agit d'une logique permettant de mettre à jour un enregistrement existant, ou d'insérer un nouvel enregistrement si celui-ci n’existe pas encore.

  

• Pour les échecs d’exécution, vous pouvez approfondir pour voir la cause profonde.

  Voici un exemple d’échec avec des erreurs de validation de projet. Dans ce cas, l’erreur de validation du projet est due à des champs sources manquants dans les mappages d’entités.

  

• Si l’exécution du projet est dans l’état « ERROR », elle effectue une nouvelle tentative d’exécution lors de l’exécution planifiée suivante.

• Si l’exécution du projet est dans l’état « WARNING », vous devez résoudre les problèmes sur la source. Il réessaie l’exécution à la prochaine exécution prévue.

  Dans les deux cas, vous pouvez également choisir de « réexécuter manuellement l’exécution ».

Configurer une actualisation basée sur une planification

Deux types d’exécutions/écritures sont disponibles :

• Les écritures manuelles (exécuter ou actualiser le projet manuellement)

• Les écritures basées sur une planification (actualisation automatique)

Après avoir créé un projet d’intégration, vous pouvez l’exécuter manuellement ou configurer des écritures basées sur la planification, ce qui vous permet de configurer l’actualisation automatique pour vos projets.

Pour configurer des écritures basées sur la planification, procédez comme suit :

1. Accéder au centre d’administration de Power Platform.
2. Sélectionnez Gérer dans le volet de navigation.
3. Dans le volet Gérer , sélectionnez Intégration des données. La page d’intégration des données s’affiche.
4. Sélectionnez l’onglet Projets , sélectionnez le projet, puis sélectionnez l’icône de menu contextuel (...) et Planification.
5. Sous l’onglet Planification ,
6. Sélectionnez le bouton bascule pour que l’option Tous les s’affiche et complétez tous les champs.
7. Sélectionnez Enregistrer la planification.

Vous pouvez définir une fréquence aussi souvent qu’une minute ou la récurriser quelques heures, jours, semaines ou mois. L’actualisation suivante ne démarre pas tant que la tâche précédente du projet n’a pas terminé son exécution.

Notez également que, sous Notifications, vous pouvez opter pour les notifications d’alerte par e-mail, qui vous avertit des exécutions de travaux qui se sont terminées avec des avertissements ou qui ont échoué en raison d’erreurs. Vous pouvez fournir plusieurs destinataires, notamment des groupes séparés par des virgules.

Personnaliser des projets, des modèles et des mappages

Vous utilisez un modèle pour créer un projet d’intégration de données. Un modèle facilité le déplacement des données ce qui permet ensuite à un utilisateur professionnel ou à un administrateur d’accélérer l’intégration des données à partir de sources dans la destination et de réduire la charge globale et le coût. Un utilisateur professionnel ou un administrateur peuvent commencer avec un modèle prêt à l’emploi publié par Microsoft ou son partenaire et le personnaliser encore avant de créer un projet. Vous pouvez ensuite enregistrer le projet comme modèle et partager avec votre organisation et/ou créer un projet.

Un modèle vous fournit la source, la destination et la direction du flux de données. Vous devez garder ce fait à l’esprit lors de la personnalisation ou de la création de votre propre modèle.

Vous pouvez personnaliser des projets et des modèles des façons suivantes :

• Personnaliser les mappages de champs.
• Personnaliser un modèle en ajoutant une entité de votre choix.

Personnaliser les mappages de champs

Pour créer un ensemble de connexions, procédez comme suit :

1. Accéder au centre d’administration de Power Platform.
2. Sélectionnez Gérer dans le volet de navigation.
3. Dans le volet Gérer , sélectionnez Intégration des données. La page d’intégration des données s’affiche.
4. Sélectionnez l’onglet Projets , sélectionnez le projet pour lequel vous souhaitez personnaliser les mappages de champs, puis sélectionnez l’icône du menu contextuel (...) et les détails du jeu de connexions.
5. Sélectionnez le lien Accéder aux détails de l’ensemble de connexion.
6. Sélectionnez l’onglet Organisations , puis sélectionnez + Ajouter un mappage.
7. Après avoir personnalisé vos mappages de champs, sélectionnez Enregistrer dans la barre de commandes.

Créer votre propre modèle

Créer votre propre modèle en modifiant des modèles existants

1. Connectez-vous au Centre d’administration Power Platform.

2. Sélectionnez Gérer>l’intégration des données dans le volet de navigation gauche.

3. Sous l’onglet Modèles , créez un projet en sélectionnant un modèle existant qui correspond à votre choix de source et de destination et de direction du flux.

4. Choisissez la connexion appropriée.

5. Avant d’enregistrer ou d’exécuter le projet, sélectionnez Ajouter une tâche dans la barre de commandes.

   La boîte de dialogue Ajouter une tâche s’ouvre.

6. Spécifiez un nom de tâche significatif et ajoutez les entités sources et de destination de votre choix.

7. Une liste déroulante affiche toutes vos entités source et de destination.

   

   Dans ce cas, une tâche a été créée pour synchroniser l’entité Utilisateur de SalesForce à l’entité Utilisateurs de Dataverse.

   

8. Après avoir créé la tâche, vous pouvez afficher votre nouvelle tâche répertoriée et supprimer la tâche d’origine.

9. Vous venez de créer un modèle : dans ce cas, un modèle d’extraction de données de l’entité Utilisateur à partir de SalesForce pour un envoi à Dataverse. Sélectionnez Enregistrer pour enregistrer votre personnalisation.

10. Suivez les étapes de personnalisation des mappages de champs pour ce nouveau modèle. Vous pouvez exécuter ce projet et enregistrer le projet en tant que modèle à partir de l’onglet Projet . Lors de l’enregistrement en tant que modèle, fournissez un nom et une description. Vous pouvez également partager le modèle avec tous les membres de votre organisation.

    

Créer votre propre modèle à partir d’un modèle vide

1. Connectez-vous au Centre d’administration Power Platform.

2. Accédez à Gérer>l’intégration des données dans le volet de navigation gauche.

3. Sélectionnez Nouveau projet et fournissez un nom à votre projet. Par exemple, Demo_CreateYourOwnTemplate projet.

4. Dans la page de liste Sélectionner un modèle, choisissez un modèle vide générique. Pour cet exemple, choisissez le modèle Sales to Fin and Ops étant donné que nous souhaitons déplacer des données à partir des applications de finances et d’opérations vers Dynamics 365 Sales.

5. Suivez les étapes 6 à 9 de la procédure de création d’un autre projet d’intégration de données pour créer le projet d’intégration de données souhaité. Ensuite, sélectionnez Enregistrer.

6. La page Tâches s’affiche, qui est vide, car il s’agit d’un modèle vide, sans aucune tâche. Sélectionnez Ajouter une tâche pour sélectionner une entité dans la liste déroulante et ajouter une nouvelle tâche.

   Dans ce cas, à des fins de démonstration, nous créons une tâche Activities Sales to Fin and Ops en sélectionnant l’entité Activities pour les applications financières et opérationnelles et Dynamics 365 Sales. Cliquez sur Créer.

7. Vous observez qu’une nouvelle tâche est ajoutée. Activités de Sales vers Fin and Ops Sélectionnez Enregistrer pour appliquer vos modifications.

8. Le projet est créé. Sous l’onglet Projets , sélectionnez le projet, puis sélectionnez ... >Enregistrez en tant que modèle.

9. Fournissez un nom et une description, puis sélectionnez Enregistrer. En outre, sélectionnez Partager avec tous les membres de mon organisation pour partager ce modèle.

Le modèle nouvellement créé apparaît dans la page de liste Modèles .

En outre, après avoir créé un projet d’intégration, lorsque vous choisissez Sélectionner un modèle , vous remarquerez votre nouveau modèle dans l’onglet Modèles .

Transformation et filtrage avancés des données

Avec la prise en charge de Power Query, le filtrage avancé et la transformation des données sources sont disponibles. Power Query permet aux utilisateurs de reformer des données en fonction de leurs besoins, avec une expérience utilisateur simple à utiliser, engageante et sans code. Vous pouvez activer cela projet par projet.

Activer la requête et le filtrage avancés

1. Accéder au centre d’administration de Power Platform.

2. Sélectionnez Gérer>l’intégration des données dans le volet de navigation gauche.

3. Sous l’onglet Projets , sélectionnez le projet dans lequel vous souhaitez activer la requête avancée, sélectionnez ...>Détails du projet. Ensuite, sélectionnez Requête avancée dans la barre de commandes.

4. Vous recevez un avertissement indiquant que l’activation de la requête avancée est une opération unidirectionnelle et ne peut pas être annulée. Sélectionnez OK pour continuer puis sélectionnez la flèche de mappage source et de destination.

5. Vous êtes présenté à la page de mappage d’entités familière avec un lien permettant d’ouvrir la requête et le filtrage avancés.

6. Sélectionnez ce lien pour ouvrir l’interface utilisateur de Filtrage et requête avancés, qui affiche les données du champ source dans des colonnes de type Microsoft Excel.

   

7. Dans le menu supérieur, vous avez plusieurs options pour transformer des données telles que Ajouter une colonne conditionnelle, une colonne dupliquée et Extraire.

   

8. Vous pouvez également cliquez avec le bouton droit sur une colonne pour plus d’options comme Supprimer les colonnes, Supprimer les doublons, Fractionner la colonne.

   

9. Vous pouvez également filtrer en sélectionnant chaque colonne et en utilisant des filtres de type Excel.

   

10. Les transformations de valeurs par défaut peuvent être obtenues à l’aide de la colonne conditionnelle. Pour ce faire, dans la liste déroulante Ajouter une colonne, sélectionnez Ajouter une colonne conditionnelle et entrez le nom de la nouvelle colonne. Renseignez les deux champs Alors et Sinon avec ce qui doit être la valeur par défaut, tout en utilisant un champ et une valeur quelconques pour Si et Est égal à.

    

11. Notez la clause chacun dans l’éditeur fx, en haut de la liste.

    

12. Résolvez clause chacun dans l’éditeur fx et sélectionnez OK.

    

13. Chaque fois que vous apportez une modification, vous appliquez une étape. Vous pouvez voir les étapes appliquées dans le volet droit (défilement vers le bas pour afficher la dernière étape). Vous pouvez annuler une étape à modifier. En outre, vous pouvez accéder à l’Éditeur avancé en cliquant avec le bouton droit sur QrySourceData dans le volet gauche, en haut pour afficher le langage M qui est exécuté en arrière plan, avec les mêmes étapes.

    

14. Sélectionnez OK pour fermer l’interface de requête et de filtrage avancées, puis, dans la page des tâches de mappage, sélectionnez la colonne nouvellement créée comme source pour créer le mappage souhaité.

Pour plus d’informations sur Power Query, consultez la documentation Power Query.

Facteurs qui ont un impact sur le réglage des performances

Plusieurs facteurs impactent les performances d’un scénario d’intégration. Les performances dépendent fortement de :

• Quelles applications vous intégrez : applications financières et opérationnelles et Dataverse.
• Quelles entités sont utilisées : la forme, la validation et la logique métier des entités (standard et personnalisations).

L’intégrateur de données prend les données de l’application source et les transmet à l’application cible. Les principales considérations en matière de performances sont comment les applications sources et cibles évoluent avec les entités concernées. Il utilise les meilleures technologies disponibles pour extraire/envoyer des données de manière performante.

Les applications de finance et d’exploitation utilisent le framework de gestion des données, qui permet d’extraire et de transmettre des données de manière la plus performante. L’infrastructure de gestion des données est utilisée pour gérer les entités de données et les packages d’entités de données dans les applications de finances et d’opérations.

Les applications Dynamics 365 avec Dataverse utilisent des API OData, ainsi que le parallélisme pour optimiser les performances.

Vous pouvez utiliser les paramètres suivants pour régler les performances des applications de finances et d’opérations en fonction de la charge, de l’entité et des ressources.

Exportation de données à partir d’applications financières et opérationnelles

• Exportation directe (ignorer l’étape de préproduction) : assurez-vous que les entités utilisées pour l’intégration prennent en charge l’exportation directe (ignorer l’étape de préproduction). Cela permet l’exécution de l’exportation en nombre et la table de mise en lots est contournée. Si vous exécutez avec Ignorer la progression, il retombe aux appels ligne par ligne et les données sont insérées dans la table de mise en lots.
• Activer le suivi des modifications pour les entités : le suivi des modifications permet l’exportation incrémentielle des données à partir d’applications financières et opérationnelles à l’aide de la gestion des données. Dans une exportation incrémentielle, seuls les enregistrements modifiés sont exportés. Pour activer l’exportation incrémentielle, vous devez activer le suivi des modifications sur les entités. Sans suivi des modifications, vous effectuez des exportations complètes, ce qui peut affecter les performances. Pour les scénarios complexes, utilisez des requêtes personnalisées pour le suivi des modifications.

Importation de données dans des applications financières et opérationnelles

• Vérifiez que l’entité elle-même est performante. Si possible, créez des entités basées sur des ensembles.
• Si le nombre de lignes à importer est élevé et que l’entité ne prend pas en charge les opérations de jeu : la gestion des données peut être configurée pour importer l’entité avec des tâches parallèles. Cela peut être configuré dans la gestion des données (paramètres), en configurant les paramètres d’exécution de l’entité. Cela utilise l’infrastructure batch pour créer des tâches parallèles, basées sur la disponibilité des ressources à exécuter en parallèle.
• Désactivation des validations (facultatives) : bien que l’intégrateur de données ne contourne pas la logique métier et les validations, vous pouvez éventuellement désactiver ceux qui ne sont pas nécessaires pour améliorer les performances.

Importer/exporter des données vers/depuis des applications d’engagement client

Vérifiez que les index sont définis pour les clés d’intégration.

Contenu connexe

Mises à jour de l’intégrateur de données : nouvelles fonctionnalités avec une interface utilisateur intuitive offrant une expérience fluent.