Sujet :
explosion des coûts s3 sur les buckets de logs comment optimiser ?
RÉSOLU
Liste des sujets Répondre Créer un sujet
Membre depuis le 06/05/2024
yo on a les coûts s3 qui montent en flèche à cause de l'archivage de logs. on a des buckets qui sont là depuis des années et y'a des téraoctets de logs qui traînent. on a des policy de rétention de 7 ans pour des raisons de conformité. vous avez des best practices pour réduire la facture sans casser la rétention ?
Répondre
vous devez être connecté pour poster un message !
Rejoindre la communauté
Recevoir les derniers articles gratuitement en créant un compte !
S'inscrire
suzanne-texier
Membre depuis le 30/05/2024
lifecycle policies direct. tu passes tout ce qui est plus vieux que 30j en s3 glacier instant retrieval puis ce qui est plus vieux que 90j en glacier flexible retrieval et enfin plus vieux que 365j en glacier deep archive. les coûts de stockage sont ridicules après mais faut faire attention aux coûts de récupération si jamais tu y touches
luc-gaillard
Membre depuis le 14/11/2024
l'intelligent-tiering peut être une bonne option aussi. amazon gère automatiquement le passage entre les différents niveaux de stockage en fonction des patterns d'accès. si tes logs sont rarement consultés après un certain temps ça passe en niveau cold automatiquement. c'est un peu plus cher que les policies manuelles mais ça simplifie grave la gestion
edouard72
Membre depuis le 06/05/2024
ok lifecycle policies c'est ce qu'on fait déjà un peu mais ptete pas assez agressif. l'intelligent-tiering ça me botte bien pour le côté auto. mais j'ai une question : est-ce qu'il y a des coûts d'egress ou des coûts de récupération plus élevés quand les objets changent de tiering via intelligent-tiering ou si je dois récupérer un objet d'un tier froid ?
suzanne-texier
Membre depuis le 30/05/2024
l'intelligent-tiering n'a pas de frais de récupération spécifiques pour le passage entre ses propres classes. les frais standard s3 egress s'appliquent si tu télécharges les données hors d'aws. par contre si tu vas sur glacier deep archive avec une lifecycle policy oui là les frais de récupération peuvent être costauds si tu n'utilises pas les free tier de récupération ou si tu as de gros volumes. faut bien évaluer la probabilité de récupérer ces vieilles archives
edouard72
Membre depuis le 06/05/2024
ok je vois la nuance. pour les logs très anciens c'est vraiment de l'archi on y touche quasi jamais. donc glacier deep archive c'est le move. pour les logs plus récents mais pas activement consultés intelligent-tiering est parfait. je vais revoir nos policies. thx pour les conseils c'est top