Comment obtenir la taille d'un compartiment Amazon S3

Mise à jour avril 2024: Arrêtez de recevoir des messages d'erreur et ralentissez votre système avec notre outil d'optimisation. Obtenez-le maintenant à ce lien

1. Téléchargez et installez l'outil de réparation ici.
2. Laissez-le analyser votre ordinateur.
3. L'outil va alors répare ton ordinateur.

Pour des raisons que je n'ai jamais comprises, le Amazon Le magasin de fichiers d'objets AWS S3 ne fournit pas de métadonnées sur la taille et le nombre d'objets dans un compartiment. Cela signifie que pour répondre à la question simple «Comment obtenir la taille totale d'un compartiment S3», le compartiment doit être analysé pour compter les objets et déterminer la taille totale. Cela est lent, en particulier lorsque vous avez des millions d'objets dans un compartiment.

Pour AWS, trouver la taille d'un compartiment S3 n'est pas très intuitif et caché dans les menus. Apprenez à trouver la taille totale, à l'afficher graphiquement dans CloudWatch ou à la récupérer par programme à partir de la ligne de commande.

Comment obtenir la taille d'un compartiment Amazon S3 à l'aide de la CLI

AWS CLI prend désormais en charge le paramètre –query, qui prend une expression JMESPath.

Cela signifie que vous pouvez additionner les valeurs de taille spécifiées par les objets de la liste avec sum (Contents []. Size) et compter comme longueur (Contents []).

Cela peut être fait à l'aide de l'AWS CLI officielle comme suit et a été introduit en février 2014

aws s3api list-objects –bucket BUCKETNAME –output json –query «[somme (Contents []. Size), length (Contents [])]»

or

Cela peut maintenant être fait de manière simple avec le client de ligne de commande AWS officiel seul:

aws s3 ls –summarize –human-readable –recursive s3: // nom du compartiment /

Il accepte également les préfixes de chemin si vous ne souhaitez pas compter toute la plage:

aws s3 ls –summarize –human-readable –recursive s3: // nom du compartiment / répertoire

Ainsi, la taille des grandes zones de mémoire est affichée beaucoup plus rapidement qu'en additionnant récursivement les tailles de fichier, car l'espace mémoire réellement utilisé est rappelé. Il est également lisible par l'homme si vous passez l'indicateur -H, vous n'avez donc pas besoin de sortir votre calculatrice.

Utilisation de l'AWS Web Console et de Cloudwatch

• Accéder à CloudWatch
• Cliquez sur les mesures sur le côté gauche de l'écran
• Cliquez sur S3
• Cliquez sur «Enregistrer
• Vous verrez une liste de tous les seaux. Notez qu'il y a deux points de confusion possibles ici:
  • une. Vous ne verrez que les buckets contenant au moins un objet.
  • b. Vous ne verrez peut-être pas les buckets créés dans une autre région et vous devrez peut-être changer de région à l'aide du menu déroulant dans le coin supérieur droit pour voir des buckets supplémentaires.
• Recherchez le mot «Stockage standard» dans la zone «Rechercher une métrique, une dimension ou un identifiant de ressource».
• Sélectionnez les zones (ou toutes les zones avec la case à cocher à gauche sous le mot «Toutes») pour lesquelles vous souhaitez calculer la taille totale.
• Sélectionnez au moins 3d (3 jours) ou plus dans la chronologie en haut à droite de l'écran.

Vous verrez maintenant un graphique montrant la taille quotidienne (ou une autre unité) de la liste de tous les seaux sélectionnés sur la période sélectionnée.

https://stackoverflow.com/questions/32192391/how-do-i-find-the-total-size-of-my-aws-s3-storage-bucket-or-folder

Conseil d'expert Cet outil de réparation analyse les référentiels et remplace les fichiers corrompus ou manquants si aucune de ces méthodes n'a fonctionné. Cela fonctionne bien dans la plupart des cas où le problème est dû à la corruption du système. Cet outil optimisera également votre système pour maximiser les performances. Il peut être téléchargé par En cliquant ici