Remarque
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de vous connecter ou de modifier des répertoires.
L’accès à cette page nécessite une autorisation. Vous pouvez essayer de modifier des répertoires.
La fonctionnalité d’exportation automatique pour Azure Managed Lustre est une fonctionnalité qui synchronise automatiquement les modifications dans votre système de fichiers Azure Managed Lustre avec un conteneur de stockage Blob Azure lié.
Cette fonctionnalité permet de s’assurer que les fichiers nouveaux et modifiés dans le système de fichiers sont reflétés dans le conteneur de stockage Blob associé sans intervention manuelle. Cela simplifie la gestion des données et améliore la synchronisation pour le stockage à long terme.
Fonctionnalité d’exportation automatique
L’exportation automatique fonctionne en surveillant en continu les modifications dans le système de fichiers Azure Managed Lustre. En fonction de la stratégie d’exportation configurée, il met à jour le contenu du conteneur de stockage Blob associé pour refléter ces modifications. Cette fonctionnalité fournit aux utilisateurs un processus transparent et automatisé pour la réplication des données.
Paramétrage
L’exportation automatique est activée sur un système de fichiers Azure Managed Lustre existant sur lequel un conteneur de stockage Blob associé est configuré. Vous pouvez configurer l'exportation automatique à l’aide des paramètres d’intégration Blob dans le portail Azure.
Pour créer un travail d’exportation automatique, procédez comme suit :
Dans le portail Azure, ouvrez votre système de fichiers Azure Managed Lustre. Sous Paramètres, sélectionnez Intégration de blob.
Sélectionnez + Créer un travail.
Dans la liste déroulante Type de travail , sélectionnez Exportation automatique.
Dans le champ chemin du système de fichiers, vous pouvez spécifier un chemin d’accès au répertoire en entrant une chaîne.
Tous les fichiers nouveaux ou modifiés dans le système de fichiers sous ce chemin d’accès (préfixe) sont continuellement exportés. Les fichiers sont écrits dans le conteneur blob avec le même chemin d’accès (ou préfixe) qu’ils ont dans le système de fichiers Lustre. Pour éviter de remplacer les fichiers existants dans le conteneur d’objets blob, assurez-vous que le chemin d’accès du fichier dans votre système de fichiers Lustre ne chevauche pas le chemin d’accès existant du fichier dans le conteneur d’objets blob. (La seule exception est si votre fichier Lustre a été importé à partir de ce chemin dans le conteneur d’objets blob.)
Comportement d’exportation automatique
Voici comment l’exportation automatique gère différents types de modifications :
- Nouvelle création de fichiers, nouveaux répertoires et modifications de contenu de fichier : le processus d’intégration d’objets blob identifie les nouveaux fichiers et les répertoires et les données qui ont changé. Il démarre automatiquement un travail d’exportation. L’exportation automatique garantit que la dernière version du fichier est transférée vers le stockage Blob.
- Modifications des métadonnées : les modifications telles que les renommages, les mises à jour de propriété ou les ajustements d’autorisation ne sont actuellement pas synchronisés.
- Suppression : lorsque des fichiers, des répertoires ou des liens symboliques sont supprimés dans le système de fichiers, ils ne sont pas supprimés du conteneur Stockage Blob.
Aucun travail d’intégration d’objets blob (comme l’exportation manuelle, l’exportation automatique et l’importation) ne peut s’exécuter simultanément.
L’exportation automatique fonctionne via des itérations d’exportation continue. Une fois l’itération terminée, le processus d’intégration d’objets blob analyse le système de fichiers pour les nouveaux fichiers, répertoires ou modifications de contenu. Il démarre une nouvelle itération d’un travail d’exportation.
L’exportation des journaux de travaux dans votre conteneur de journalisation configuré peut vous aider à identifier les problèmes de synchronisation et à comprendre les raisons pour lesquelles les opérations échouent.
Surveillance et gestion de l’exportation automatique
Vous pouvez surveiller les activités d’exportation automatique et gérer les configurations à l’aide du portail Azure.
Le volet d'intégration Blob affiche les détails des activités d'exportation dans la section Travaux récents, y compris l’état des travaux récents et les indicateurs liés à la synchronisation automatique.
Pour annuler un travail en cours, sélectionnez le lien Annuler associé à ce travail dans le tableau Travaux récents. Le lien Annuler est disponible uniquement pour le travail actuel.
Pour afficher les métriques d’un travail d’exportation automatique, sélectionnez la valeur Nom du travail. Le volet Métriques s’affiche dans le volet latéral du portail.
Surveillance des tâches d'exportation automatique
Le volet Blob integration affiche les détails des activités d’exportation dans la section Travaux récents, y compris l’état des travaux récents et les métriques liés à la synchronisation automatique.
Pour annuler un travail en cours, sélectionnez le lien Annuler pour ce travail dans la table Travaux récents . Le lien Annuler est disponible uniquement pour le travail actuel.
Pour afficher les métriques d’un travail d’exportation automatique, sélectionnez la valeur Nom du travail. Le volet Métriques s’affiche dans le volet latéral du portail.
Métriques
Dans le portail, les métriques sont regroupées en deux catégories principales : Itération globale et actuelle.
Statistiques globales
Statistiques après l’activation de l’exportation automatique
Nombre total de fichiers exportés
Nombre de fichiers correctement copiés dans le conteneur d’objets blob associé après l’activation de l’exportation automatique.
Total miB exporté
Taille totale de fichier (en MiB) correctement copiée dans le conteneur d’objets blob associé après l’activation de l’exportation automatique.
Itérations terminées
Le nombre de fois que le processus d'intégration Blob a détecté de nouvelles données ou des données modifiées et a initié un nouveau travail d'exportation.
Dernière itération réussie
Horodatage de fin de la dernière itération qui a correctement exporté toutes les données vers le conteneur blob associé.
Statistiques d’itération actuelles
Statistiques sur l’activité actuelle
Fichiers découverts
Nombre de fichiers que le travail d'exportation est en train d'exporter, y compris les fichiers déjà copiés avec succès dans le conteneur d'objets blob associé dans cette itération.*
MiB découvert
Taille de fichier agrégée (en MiB) que la tâche d’exportation exporte actuellement, y compris les fichiers déjà copiés dans le conteneur d’objets blob associé dans cette itération.*
Fichiers exportés
Nombre de fichiers nouveaux et modifiés copiés avec succès dans le conteneur d'objets blob associé.
MiB exporté
Taille de fichier agrégée (en Mio) des données nouvelles et modifiées copiées avec succès dans le conteneur Blob associé.
Échec des fichiers
Nombre total de fichiers qui n’ont pas pu être copiés pendant l’itération actuelle. Sélectionnez ce lien pour accéder à la page Conteneur de journalisation pour afficher les journaux associés à cette tâche d’exportation automatique.
* Les métriques de l’itération en cours actuelle doivent être lues jusqu’à présent. Par exemple, Les fichiers découverts sont le nombre de fichiers découverts pour l’exportation au moment de la création de rapports. Le prochain cycle de création de rapports peut indiquer que d’autres fichiers sont découverts.
Considérations et bonnes pratiques
Lorsque vous utilisez la fonctionnalité d’exportation automatique, tenez compte des meilleures pratiques suivantes pour garantir une opération fluide :
- Gestion des conflits : si un fichier est modifié à la fois dans le système de fichiers et le stockage Blob, il existe un risque de remplacement. Utilisez la coordination au niveau de l’application pour empêcher les modifications en conflit.
- Désactivez l’exportation automatique avant la suppression : avant de supprimer un système de fichiers ou son processus d’intégration d’objets blob, assurez-vous que toutes les mises à jour mises en file d’attente sont synchronisées. Vérifiez que la dernière heure d’itération réussie est récente et que la métrique Files Failed est égale à zéro pour éviter la perte de données. Ensuite, désactivez l’exportation automatique.