Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Présentation d’Amazon S3 Storage Lens

Amazon S3 Storage Lens est une fonction d’analyse du stockage dans le cloud que vous pouvez utiliser pour obtenir une visibilité à l’échelle de l’organisation sur l’utilisation et l’activité du stockage d’objets. Vous pouvez utiliser les métriques S3 Storage Lens pour générer des informations récapitulatives, telles que la quantité de stockage dont vous disposez dans l’ensemble de votre organisation ou les compartiments et préfixes qui connaissent la croissance la plus rapide. Vous pouvez également utiliser les métriques S3 Storage Lens pour identifier les opportunités d'optimisation des coûts, mettre en œuvre les bonnes pratiques de protection et de sécurisation des données et améliorer les performances des charges de travail d'application. Par exemple, vous pouvez identifier les compartiments qui sont dépourvus de règles de cycle de vie S3 pour faire expirer les chargements partitionnés non terminés datant de plus de 7 jours. Vous pouvez également identifier les compartiments qui ne respectent pas les bonnes pratiques de protection des données, telles que l'utilisation de la réplication S3 ou de la gestion des versions S3. S3 Storage Lens analyse également les métriques de stockage pour fournir des recommandations contextuelles afin d'aider à réduire les coûts de stockage et à appliquer les bonnes pratiques de protection des données.

S3 Storage Lens regroupe vos métriques et affiche les informations dans la section Account snapshot (Instantané du compte) sur la page Buckets (Compartiments) de la console Amazon S3. S3 Storage Lens fournit également un tableau de bord interactif que vous pouvez utiliser pour visualiser les informations et les tendances, signaler les valeurs aberrantes et recevoir des recommandations pour optimiser les coûts de stockage et appliquer les meilleures pratiques en matière de protection des données. Votre tableau de bord comporte des options d'exploration permettant de générer et de visualiser des informations au niveau de l'organisation, du compte, de la classe de stockage Région AWS, du bucket, du préfixe ou du groupe Storage Lens. Vous pouvez également envoyer un rapport de mesures quotidiennes au format CSV ou Parquet au format CSV vers un compartiment S3 à usage général ou exporter les métriques directement vers un compartiment de table S3 AWS géré. Vous pouvez créer et gérer des tableaux de bord S3 Storage Lens à l'aide de la console Amazon S3, AWS Command Line Interface (AWS CLI) ou de l'API REST Amazon S3. AWS SDKs

Concepts et terminologie propres à S3 Storage Lens

Cette section contient la terminologie et les concepts essentiels pour bien comprendre et utiliser Amazon S3 Storage Lens.

Configuration du tableau de bord

S3 Storage Lens nécessite une configuration de tableau de bord contenant les propriétés requises pour agréger les métriques en votre nom pour un seul tableau de bord ou une seule exportation. Lorsque vous créez une configuration, vous choisissez le nom du tableau de bord et la région d’origine, que vous ne pouvez pas modifier après avoir créé le tableau de bord. Vous pouvez éventuellement ajouter des étiquettes et configurer une exportation des métriques au format CSV ou Parquet.

Dans la configuration du tableau de bord, vous définissez également la portée du tableau de bord et la sélection des métriques. La portée peut inclure tout le stockage du compte de votre organisation ou des sections filtrées par région, compartiment et compte. Lorsque vous configurez la sélection des métriques, vous avez le choix entre les métriques de niveau gratuit et les métriques de niveau avancé, que vous pouvez passer à un niveau supérieur moyennant des frais supplémentaires. Avec le niveau avancé, vous pouvez accéder à des statistiques et à des fonctionnalités supplémentaires. Ces fonctionnalités incluent les catégories de mesures avancées, l'agrégation au niveau des préfixes, les recommandations contextuelles et la publication sur Amazon. CloudWatch Pour obtenir des informations sur la tarification de S3 Storage Lens, consultez la tarification Amazon S3.

Tableau de bord par défaut

Le tableau de bord par défaut de S3 Storage Lens sur la console est nommé default-account-dashboard. S3 préconfigure ce tableau de bord pour qu’il affiche le résumé des informations et des tendances pour l’ensemble de votre compte, et les met à jour quotidiennement dans la console S3. Vous ne pouvez pas modifier l'étendue de configuration du tableau de bord par défaut, mais vous pouvez améliorer la sélection des métriques, des métriques de niveau gratuit aux métriques de niveau avancé. Vous pouvez configurer l’exportation facultative des métriques ou même désactiver le tableau de bord. Toutefois, vous ne pouvez pas supprimer le tableau de bord par défaut.

Tableaux de bord

Vous pouvez créer des tableaux de bord S3 Storage Lens supplémentaires et les définir en Régions AWS fonction de compartiments S3 ou de comptes (pour AWS Organizations). Lorsque vous créez ou modifiez un tableau de bord S3 Storage Lens, vous définissez la portée de ce tableau de bord et la sélection des métriques. S3 Storage Lens propose des métriques de niveau gratuites et des métriques de niveau avancé, que vous pouvez passer à un niveau supérieur moyennant des frais supplémentaires. Grâce aux métriques avancées, vous pouvez accéder à des métriques et à des fonctionnalités supplémentaires pour mieux comprendre votre stockage. Il s'agit notamment des catégories de mesures avancées, de l'agrégation au niveau des préfixes, des recommandations contextuelles et de la publication sur Amazon. CloudWatch Pour obtenir des informations sur la tarification de S3 Storage Lens, consultez la tarification Amazon S3.

Vous pouvez également désactiver ou supprimer les tableaux de bord. Si vous désactivez un tableau de bord, il n'est plus mis à jour et vous ne recevrez plus de nouvelles statistiques quotidiennes. Vous pouvez encore voir les données d’historique pendant la période d’expiration de 14 jours. Si vous avez activé les métriques avancées pour ce tableau de bord, cette période est de 15 mois. Pour accéder aux données d'historique, vous pouvez réactiver le tableau de bord pendant la période d'expiration.

Si vous supprimez votre tableau de bord, vous perdrez tous ses paramètres de configuration. Vous ne recevrez plus de nouvelles métriques quotidiennes et vous perdrez également l’accès aux données historiques associées à ce tableau de bord. Si vous souhaitez accéder aux données historiques d’un tableau de bord supprimé, vous devez créer un autre tableau de bord portant le même nom dans la même Région d’accueil.

Instantané du compte

La fonctionnalité S3 Storage Lens Account snapshot (Instantané du compte) résume les métriques de votre tableau de bord par défaut et affiche votre stockage total, le nombre d’objets et la taille d’objet moyenne sur la page Buckets (compartiments) de la console S3. Cet instantané de compte vous permet d’accéder rapidement aux informations sur le stockage sans avoir à quitter la page Buckets (Compartiments). L’instantané du compte permet également d’accéder en un clic à votre tableau de bord S3 Storage Lens interactif.

Vous pouvez utiliser votre tableau de bord pour visualiser les informations et les tendances, identifier les valeurs aberrantes et recevoir des recommandations pour optimiser les coûts de stockage et appliquer les meilleures pratiques en matière de protection des données. Votre tableau de bord dispose d’options d’exploration pour générer des informations au niveau de l’organisation, du compte, du compartiment, de l’objet ou du préfixe. Vous pouvez également envoyer une exportation de métriques quotidienne au format CSV ou Parquet vers un compartiment S3.

Vous ne pouvez pas modifier la portée du tableau de bord default-account dashboard (tableau de bord de compte par défaut), car il est lié à Account snapshot (Instantané du compte). Cependant, vous pouvez améliorer la sélection des indicateurs dans votre sélection, default-account-dashboarddes indicateurs gratuits aux indicateurs avancés payants. Après cette mise à niveau, vous pouvez afficher toutes les demandes, les octets chargés et les octets téléchargés dans Account snapshot (Instantané du compte) S3 Storage Lens.

Exportation de métriques

Une exportation de métriques S3 Storage Lens est un fichier contenant toutes les métriques identifiées dans votre configuration S3 Storage Lens. Ces informations sont générées quotidiennement au format CSV ou Parquet au format CSV et sont envoyées vers un compartiment S3 à usage général. Vous pouvez également exporter les métriques directement vers le compartiment de table S3 aws-s3 AWS géré, ce qui facilite les requêtes à l'aide de services AWS d'analyse ou d'outils tiers. Vous pouvez utiliser l’exportation des métriques pour une analyse approfondie à l’aide de l’outil de métriques de votre choix. Le compartiment spécifié pour l'exportation de vos métriques doit se trouver dans la même région que votre configuration S3 Storage Lens. Vous pouvez générer une exportation de métriques S3 Storage Lens à partir de la console S3 en modifiant la configuration de votre tableau de bord. Vous pouvez également configurer une exportation de métriques à l'aide des touches AWS CLI et AWS SDKs.

Deux types d'exportations métriques sont disponibles dans Storage Lens :

Destinations d'exportation des métriques

Lorsque vous exportez des données de métriques Storage Lens, vous pouvez choisir un compartiment S3 à usage général ou un compartiment de table S3 comme destination. Les buckets à usage général offrent une compatibilité étendue avec les outils et applications existants, offrant ainsi la flexibilité nécessaire pour traiter les données de votre compte, en utilisant vos services d'analyse préférés. Cette option prend en charge les modèles d'accès S3 standard et les intégrations pour l'analyse des données au sein de compartiments individuels de votre région. En revanche, le compartiment de table S3 vous permet d'exécuter des requêtes immédiates sur plusieurs comptes et régions, de créer des tableaux de bord personnalisés avec Amazon Quick Suite et de joindre des données à d'autres AWS services ou outils tiers, sans avoir besoin d'une infrastructure de traitement supplémentaire. Par exemple, vous pouvez combiner les métriques de Storage Lens avec les métadonnées S3 pour analyser les modèles d'activité des objets au sein de votre organisation.

Godet à usage général S3

L'exportation des métriques de Storage Lens vers un bucket S3 à usage général offre flexibilité et continuité pour le stockage de vos données Storage Lens. Vous pouvez maintenir les flux de travail existants et la cohérence opérationnelle en continuant à utiliser votre infrastructure actuelle et les processus d'extraction, de transformation et de chargement (ETL), les outils d'analyse ou les flux de travail automatisés existants. Les buckets à usage général fonctionnent également avec la gamme complète de AWS services et d'outils tiers compatibles avec le standard S3 APIs. Cela vous donne une flexibilité maximale dans la manière dont vous traitez, analysez ou visualisez les informations relatives à votre Storage Lens. En outre, vous pouvez mettre en œuvre des politiques de cycle de vie S3 pour gérer automatiquement la conservation des données, en transférant les anciennes métriques vers des classes de stockage moins coûteuses ou en les supprimant après des périodes spécifiées afin d'optimiser les coûts. Par conséquent, si la continuité opérationnelle et la flexibilité du flux de travail sont vos priorités pour la mise en œuvre de Storage Lens, envisagez de choisir un bucket S3 à usage général pour exporter vos données Storage Lens. Pour plus d'informations sur la tarification des buckets S3 à usage général, consultez la section Tarification d'Amazon S3.

seau de table S3

Lorsque vous exportez des métriques Storage Lens vers un bucket de table S3, vous pouvez facilement analyser votre utilisation du stockage et vos mesures d'activité sans créer de pipelines de données. Vos métriques sont organisées dans des tables S3 créées dans un compartiment de tables S3 AWS géré aws-s3 pour optimiser les performances des requêtes, avec des périodes de conservation et des paramètres de chiffrement personnalisables pour répondre à vos besoins en matière de gestion des données. Avec vos statistiques dans S3 Tables, vous pouvez exécuter des requêtes sur plusieurs comptes et régions à l'aide d'outils SQL et de services AWS d'analyse (tels qu'Amazon Athena, Amazon Quick Suite, Amazon EMR et Amazon Redshift) pour créer des tableaux de bord personnalisés et générer des informations plus approfondies. Par exemple, vous pouvez associer les métriques S3 Storage Lens aux métadonnées S3 pour identifier les objets dans les préfixes qui n'indiquent aucune activité récente. Toutes les données stockées dans un compartiment de tables S3 entraînent des coûts liés aux tables S3. Pour plus d'informations sur la tarification de S3 Tables, consultez la section Tarification d'Amazon S3.

Autorisations pour l'exportation des métriques vers les tables S3

Pour créer et utiliser des tables et des compartiments de tables S3 Storage Lens, vous devez disposer de certaines s3tables autorisations. Pour configurer S3 Storage Lens sur S3 Tables, vous devez au minimum disposer des s3tables autorisations suivantes :

Région d’accueil

La région d'origine est celle Région AWS où sont stockées toutes les métriques S3 Storage Lens pour une configuration de tableau de bord donnée. Vous devez choisir une région d’origine lorsque vous créez votre configuration de tableau de bord S3 Storage Lens. Une fois que vous avez choisi une région d’origine, vous ne pouvez pas la modifier. De plus, si vous créez un groupe Storage Lens, nous vous recommandons de choisir la même région d’origine que celle de votre tableau de bord Storage Lens.

Période de conservation

Les métriques S3 Storage Lens sont conservées pour que vous puissiez voir les tendances historiques et comparer les différences de stockage et d’activité au fil du temps. Vous pouvez utiliser les métriques Amazon S3 Storage Lens pour les requêtes, pour observer les tendances historiques et comparer les différences d’utilisation et d’activité du stockage au fil du temps.

Toutes les métriques de S3 Storage Lens sont conservées pour une durée de 15 mois. Toutefois, les métriques ne sont disponibles que pour les requêtes d’une durée spécifique, qui dépend de votre sélection des métriques. Cette durée ne peut pas être modifiée. Pour les requêtes, les métriques gratuites sont disponibles pendant 14 jours et les métriques avancées sont disponibles pendant 15 mois.

Catégories de métriques

Dans les niveaux gratuit et avancé, les métriques S3 Storage Lens sont organisées en catégories correspondant aux principaux cas d’utilisation, tels que l’optimisation des coûts et la protection des données. Les métriques gratuites incluent le résumé, l'optimisation des coûts, la protection des données, la gestion des accès, les performances et les métriques d'événements. Lorsque vous passez aux métriques avancées, vous pouvez activer des mesures supplémentaires d'optimisation des coûts et de protection des données que vous pouvez utiliser pour réduire davantage vos coûts de stockage S3 et garantir la protection de vos données. Vous pouvez également activer des métriques d’activité et des métriques de codes de statut détaillés que vous pouvez utiliser pour améliorer les performances des flux de travail des applications.

La liste suivante montre toutes les catégories de métriques gratuites et avancées. Pour une liste complète des indicateurs individuels inclus dans chaque catégorie, voirGlossaire des métriques Amazon S3 Storage Lens.

Métriques de résumé

Les métriques récapitulatives fournissent des informations générales sur votre stockage S3, y compris le nombre total d’octets de stockage et le nombre d’objets.

Métriques d'optimisation des coûts

Les indicateurs d'optimisation des coûts fournissent des informations que vous pouvez utiliser pour gérer et optimiser vos coûts de stockage. Par exemple, vous pouvez identifier les compartiments contenant des chargements partitionnés non terminés datant de plus de 7 jours.

Avec des métriques avancées, vous pouvez activer des métriques avancées d'optimisation des coûts. Ces métriques incluent les métriques relatives aux nombres de règles de cycle de vie S3 que vous pouvez utiliser pour obtenir les nombres de règles de cycle de vie S3 d’expiration et de transition par compartiment.

Métriques sur la protection des données

Les métriques de protection des données fournissent des informations sur les fonctionnalités de protection des données, telles que le chiffrement et le versionnement S3. Vous pouvez utiliser ces mesures pour identifier les compartiments qui ne respectent pas les meilleures pratiques en matière de protection des données. Par exemple, vous pouvez identifier les compartiments qui n'utilisent pas le chiffrement par défaut avec AWS Key Management Service clés (SSE-KMS) ou le versionnement S3.

Avec des métriques avancées, vous pouvez activer des métriques avancées de protection des données. Ces métriques incluent des métriques relatives aux nombres de règles de réplication par compartiment.

Métriques de gestion des accès

Les métriques de gestion des accès fournissent des informations sur la propriété des objets S3. Vous pouvez utiliser ces métriques pour voir les paramètres de propriété d’objets utilisés par vos compartiments.

Métriques d’événements

Les métriques d’événements fournissent des informations pour les notifications d’événements S3. Les métriques d’événements vous permettent de voir quels compartiments ont des notifications d’événements S3 configurées.

Métriques de performances

Les métriques de performances fournissent des informations pour S3 Transfer Acceleration. Les métriques de performances vous permettent de voir dans quels compartiments l’accélération des transferts est activée.

Métriques d’activité (avancées)

Si vous passez au niveau avancé de votre tableau de bord, vous pouvez activer les mesures d'activité. Les métriques d'activité fournissent des détails sur la manière dont votre stockage est demandé (par exemple, toutes les demandes, les demandes Get, les requêtes Put), les octets chargés ou téléchargés et les erreurs.

Les métriques d’activité au niveau des préfixes vous aident à identifier les préfixes rarement utilisés, afin que vous puissiez passer à une classe de stockage plus optimale à l’aide de S3 Lifecycle.

Métriques de codes de statut détaillées (avancées)

Si vous passez au niveau avancé de votre tableau de bord, vous pouvez activer les indicateurs de code de statut détaillés. Les métriques de codes de statut détaillées fournissent des informations sur les codes de statut HTTP, tels que 403 Forbidden et 503 Service non disponible, que vous pouvez utiliser pour résoudre les problèmes d’accès ou de performances. Par exemple, vous pouvez consulter la métrique Nombre d’erreurs 403 Forbidden pour identifier les charges de travail qui accèdent à des compartiments sans appliquer les autorisations appropriées.

Les métriques de codes de statut détaillées au niveau des préfixes permettent de mieux comprendre les occurrences des codes de statut HTTP par préfixe. Par exemple, les métriques du nombre d’erreurs 503 vous permettent d’identifier les préfixes qui reçoivent des demandes de limitation lors de l’ingestion de données.

Advanced cost optimization metrics (Métriques avancées sur l’optimisation des coûts)

Les mesures avancées d'optimisation des coûts fournissent des informations détaillées sur les configurations de gestion du cycle de vie de votre S3 afin de vous aider à optimiser les coûts de stockage grâce à des transitions et des suppressions de données automatisées. Ces indicateurs permettent de suivre le nombre de règles de cycle de vie configurées pour différents types de règles de cycle de vie. Vous pouvez utiliser ces indicateurs pour garantir une couverture complète des règles relatives au cycle de vie dans l'ensemble de vos compartiments et identifier les opportunités de mise en œuvre de stratégies supplémentaires d'optimisation des coûts grâce à la gestion automatisée des données.

Advanced data protection metrics (Métriques avancées sur la protection des données)

Les mesures avancées de protection des données vous aident à protéger vos données en fournissant des informations sur le nombre de règles de réplication, l'utilisation du chiffrement SSE-KMS et les vulnérabilités de sécurité telles que les signatures non prises en charge et les requêtes TLS. (Remarque : les mesures relatives au nombre de règles de réplication ne sont pas disponibles pour les préfixes.)

Cette visibilité vous permet de garantir une bonne redondance des données, de valider la conformité au chiffrement, d'identifier les risques de sécurité liés à des protocoles obsolètes, de résoudre les problèmes de configuration liés à la réplication et de maintenir des stratégies de protection des données robustes au niveau de l'organisation, du compte et du bucket.

Indicateurs de performance avancés

Les indicateurs de performance avancés révèlent comment vos applications interagissent avec les données dans S3 et peuvent aider à identifier les opportunités d'optimisation des performances des applications, telles que les I/O modèles inefficaces, l'accès entre régions et le nombre d'accès aux objets uniques. Les indicateurs de performance avancés de Storage Lens éliminent le besoin d'outils de surveillance personnalisés coûteux et permettent aux clients de mettre en œuvre les meilleures pratiques S3 de manière plus efficace, en particulier pour les applications sensibles aux performances telles que la formation au machine learning, l'analyse de données et d'autres charges de travail informatiques à hautes performances.

Recommandations

S3 Storage Lens fournit des recommandations automatiques pour vous aider à optimiser votre stockage. Les recommandations sont placées contextuellement à côté des métriques concernées dans le tableau de bord S3 Storage Lens. Les données historiques ne sont pas éligibles aux recommandations, car les recommandations concernent ce qui se passe au cours de la période la plus récente. Les recommandations n’apparaissent que lorsqu’elles sont pertinentes.

Les recommandations de S3 Storage Lens sont présentées sous les formes suivantes :

Sélection des métriques

S3 Storage Lens propose deux sélections de métriques que vous pouvez choisir pour votre tableau de bord et exporter : niveau gratuit et niveau avancé.

Délimiteur de préfixes

Les délimiteurs de préfixes déterminent la manière dont Storage Lens compte la profondeur des préfixes, en séparant les niveaux hiérarchiques au sein des clés d'objet. Vous ne pouvez spécifier qu'un seul caractère pour indiquer chaque niveau dans vos préfixes. Si le délimiteur de préfixe n'est pas défini, Amazon S3 utilise « / » comme séparateur par défaut.

Lentille de stockage S3 et AWS Organizations

AWS Organizations est un outil Service AWS qui vous permet de regrouper l'ensemble de vos organisations Comptes AWS au sein d'une seule hiérarchie. Amazon S3 Storage Lens fonctionne avec AWS Organizations pour fournir une vue unique du stockage d'objets et de l'activité sur votre espace de stockage Amazon S3.

Pour de plus amples informations, veuillez consulter Utilisation d'Amazon S3 Storage Lens avec AWS Organizations.

Pour plus d’informations, consultez Amazon S3 Storage Lens et AWS Organizations dans le Guide de l’utilisateur AWS Organizations .

Rôles liés à un service Amazon S3 Storage Lens

Outre l'accès AWS Organizations sécurisé, Amazon S3 Storage Lens utilise des rôles liés à un service Gestion des identités et des accès AWS (IAM). Un rôle lié à un service est un type unique de rôle IAM directement lié à S3 Storage Lens. Les rôles liés à un service sont prédéfinis par S3 Storage Lens et incluent toutes les autorisations nécessaires pour collecter les métriques de stockage et d’activité quotidiennes des comptes membres de votre organisation.

Pour de plus amples informations, veuillez consulter Utilisation des rôles liés à un service pour Amazon S3 Storage Lens.