Compresión de Amazon S3 Storage Lens - Amazon Simple Storage Service

Compresión de Amazon S3 Storage Lens

importante

Amazon S3 aplica ahora el cifrado del lado del servidor con claves administradas por Amazon S3 (SSE-S3) como el nivel básico de cifrado para cada bucket de Amazon S3. Desde el 5 de enero de 2023, todas las cargas de objetos nuevos a Amazon S3 se cifran automáticamente sin costo adicional y sin afectar al rendimiento. El estado de cifrado automático para la configuración de cifrado predeterminada en el bucket de S3 y para cargas de objetos nuevos está disponible en registros de AWS CloudTrail, Inventario de S3, Lente de almacenamiento de S3, la consola de Amazon S3 y como encabezado de respuesta a la API de Amazon S3 adicional en AWS Command Line Interface y los SDK de AWS. Para obtener más información, consulte Preguntas frecuentes del cifrado predeterminado.

La Lente de almacenamiento de Amazon S3 es una función de análisis de almacenamiento en la nube que puede utilizar para obtener visibilidad en toda la organización sobre el uso y la actividad del almacenamiento de objetos. Puede utilizar las métricas de Lente de almacenamiento de S3 para generar información resumida, como averiguar cuánto almacenamiento tiene en toda la organización o cuáles son los buckets y los prefijos de crecimiento más rápido. También puede utilizar las métricas de Lente de almacenamiento de S3 para identificar oportunidades de optimización de costos, implementar las prácticas recomendadas de protección y seguridad de los datos y mejorar el rendimiento de las cargas de trabajo de las aplicaciones. Por ejemplo, puede identificar los buckets que no tienen reglas del ciclo de vida de S3 para que hagan vencer las cargas multipartes incompletas que tengan más de 7 días de antigüedad. También puede identificar los buckets que no siguen las prácticas recomendadas de protección de datos, como el uso de la Replicación de S3 o el control de versiones de S3. Lente de almacenamiento de S3 analiza también las métricas para ofrecer recomendaciones contextuales que puede usar para optimizar los costos de almacenamiento y aplicar las prácticas recomendadas para proteger los datos.

Lente de almacenamiento de S3 agrega las métricas y muestra la información en la sección Account snapshot (Instantánea de la cuenta) en la página Buckets de la consola de Amazon S3. Lente de almacenamiento de S3 también proporciona un panel interactivo que puede utilizar para visualizar información y tendencias, marcar valores atípicos y recibir recomendaciones para optimizar los costos de almacenamiento y aplicar las prácticas recomendadas de protección de datos. El panel tiene opciones de desglose para generar y visualizar información en el nivel de la organización, la cuenta, la Región de AWS, la clase de almacenamiento, el bucket, el prefijo o el grupo de Storage Lens. También puede enviar una exportación de métricas diaria en formato CSV o Parquet a un bucket de S3. Puede crear y administrar los paneles de S3 Storage Lens mediante la consola de Amazon S3, AWS Command Line Interface, (AWS CLI), los SDK de AWS o la API de REST de Amazon S3.

Conceptos y terminología sobre Lente de almacenamiento de S3

Esta sección contiene la terminología y los conceptos esenciales para comprender y utilizar correctamente la Lente de almacenamiento de Amazon S3.

Configuración del panel

Lente de almacenamiento de S3 requiere una configuración de panel que contenga las propiedades que se utilizan para agregar métricas en su nombre para un solo panel o exportación. Al crear una configuración, se elige el nombre del panel y la región de origen, que no puede cambiar después de crear el panel. Si lo desea, puede agregar etiquetas y configurar una exportación de métricas en formato CSV o Parquet.

En la configuración del panel, también se definen el alcance del panel y la selección de métricas. El alcance puede incluir todo el almacenamiento de la cuenta o las secciones de la organización filtradas por región, bucket y cuenta. Cuando se configura la selección de métricas, se elige entre métricas gratuitas y métricas y recomendaciones avanzadas, que puede actualizar con un costo adicional. Con métricas y recomendaciones avanzadas, puede acceder a métricas y características adicionales. Estas características incluyen las categorías de métricas avanzadas, la agregación de nivel de prefijo, las recomendaciones contextuales y la publicación de Amazon CloudWatch. Para obtener información acerca de los precios de S3 Storage Lens, consulte Precios de Amazon S3.

Panel predeterminado

El panel predeterminado de S3 Storage Lens en la consola se denomina default-account-dashboard. S3 preconfigura este panel para visualizar la información resumida y las tendencias de toda la cuenta y las actualiza diariamente en la consola de S3. No puede modificar el alcance de la configuración del panel predeterminado, pero puede actualizar la selección de métricas de métricas gratuitas a métricas y recomendaciones avanzadas. Puede configurar la exportación de métricas opcionales o incluso desactivar el panel. Sin embargo, no puede eliminar el panel predeterminado.

nota

Si desactiva el panel predeterminado, ya no se actualizará. Ya no recibirá ninguna métrica diaria nueva en el panel de S3 Storage Lens, la exportación de las métricas ni en la instantánea de la cuenta en la página Buckets de S3. Si en el panel se utilizan métricas y recomendaciones avanzadas, ya no se le cobrará. Aún podrá ver los datos históricos en el panel hasta el periodo de 14 días para que venzan las consultas de datos. Este periodo es de 15 meses si ha habilitado las métricas y recomendaciones avanzadas. Para acceder a datos históricos, puede volver a habilitar el panel dentro del periodo de vencimiento.

Paneles

Puede crear paneles de Lente de almacenamiento de S3 adicionales y segmentarlos por Regiones de AWS, buckets de S3 o cuentas (para AWS Organizations). Cuando crea o edita un panel de Lente de almacenamiento de S3, define el alcance del panel y la selección de métricas. Lente de almacenamiento de S3 ofrece métricas gratuitas y avanzadas y recomendaciones, que puede actualizar por un cargo adicional. Con métricas y recomendaciones avanzadas, puede acceder a métricas y características adicionales para obtener información sobre el almacenamiento. Entre ellas se incluyen las categorías de métricas avanzadas, la agregación en el nivel de prefijos, las recomendaciones contextuales y la publicación de Amazon CloudWatch. Para obtener información acerca de los precios de S3 Storage Lens, consulte Precios de Amazon S3.

También puede desactivar o eliminar paneles. Si deshabilita el panel, ya no se actualizará y ya no recibirá métricas diarias nuevas. Aún podrá ver los datos históricos hasta el periodo de vencimiento de 14 días. Si ha habilitado las métricas y recomendaciones avanzadas para ese panel, este periodo es de 15 meses. Para acceder a datos históricos, puede volver a habilitar el panel dentro del periodo de vencimiento.

Si elimina el panel, perderá todas las opciones de configuración del panel. Ya no recibirá métricas diarias nuevas y también perderá el acceso a los datos históricos asociados a ese panel. Si desea acceder a los datos históricos de un panel eliminado, debe crear otro panel con el mismo nombre en la misma región principal.

nota
  • Puede utilizar S3 Storage Lens para crear hasta 50 paneles por cada región de origen.

  • Los paneles de nivel de organización se pueden limitar solo a un alcance regional.

Instantánea de cuenta

La Account snapshot (Instantánea de la cuenta) de Lente de almacenamiento de S3 resume las métricas del panel predeterminado y muestra el almacenamiento total, el recuento de objetos y el tamaño promedio de los objetos en la página de la consola de S3 Buckets. Esta instantánea de cuenta le brinda acceso rápido a información sobre el almacenamiento sin tener que salir de la página Buckets. La instantánea de la cuenta también permite acceder con un solo clic al panel interactivo de Lente de almacenamiento de S3.

Puede utilizar el panel para visualizar la información y las tendencias, marcar los valores atípicos y obtener las recomendaciones necesarias para optimizar los costos de almacenamiento y aplicar las prácticas recomendadas sobre protección de datos. El panel tiene opciones de desglose para generar información en el nivel de la organización, la cuenta, el bucket, el objeto o el prefijo. También puede enviar una exportación de métricas una vez al día a un bucket de S3 en formato CSV o Parquet.

No puede modificar el alcance del default-account dashboard (Panel de la cuenta predeterminado) porque está vinculado a la Account snapshot (Instantánea de la cuenta). Sin embargo, puede actualizar la selección de métricas en el default-account-dashboard de las métricas gratuitas a las métricas y recomendaciones avanzadas pagadas. Después de la actualización, puede mostrar todas las solicitudes, los bytes cargados y los bytes descargados en la Account snapshot (Instantánea de cuenta) de Lente de almacenamiento de S3.

nota

Si desactiva el panel predeterminado, la Account snapshot (Instantánea de la cuenta) ya no se actualizará. Para seguir mostrando métricas en la Account snapshot (Instantánea de la cuenta), puede volver a habilitar default-account-dashboard.

Exportación de métricas

Una exportación de métricas de S3 Storage Lens es un archivo que contiene todas las métricas identificadas en la configuración de S3 Storage Lens. Esta información se genera diariamente en formato CSV o Parquet y se envía a un bucket de S3. Puede utilizar la exportación de métricas para realizar un análisis más detallado mediante la herramienta de métricas que elija. El bucket de S3 para la exportación de métricas debe estar en la misma región que la configuración de la lente de almacenamiento S3. Puede generar una exportación de métricas de Lente de almacenamiento de S3 desde la consola de S3 si edita la configuración del panel. También puede configurar una exportación de métricas mediante la AWS CLI y los SDK de AWS.

Región de origen

La región principal es la Región de AWS donde todas las métricas de Lente de almacenamiento de S3 para una configuración de panel determinada se almacenan. Debe elegir una región de origen cuando cree la configuración del panel de Lente de almacenamiento de S3. Una vez que haya elegido una región de origen, no podrá cambiarla. Además, si va a crear un grupo de Storage Lens, le recomendamos que elija la misma región de origen que su panel de Storage Lens.

nota

Puede elegir una de las siguientes regiones como región de origen:

  • EE.UU. Este (Norte de Virginia) – us-east-1

  • EE. UU. Este (Ohio) – us-east-2

  • EE.UU. Oeste (Norte de California) – us-west-1

  • EE.UU. Oeste (Oregón) – us-west-2

  • Asia-Pacífico (Mumbai) – ap-south-1

  • Asia-Pacífico (Seúl) (ap-northeast-2)

  • Asia Pacífico (Singapur) – ap-southeast-1

  • Asia-Pacífico (Sídney) (ap-southeast-2)

  • Asia-Pacífico (Tokio) (ap-northeast-1)

  • Canadá (Centra) – ca-central-1

  • China (Pekín): cn-north-1

  • China (Ningxia): cn-northwest-1

  • UE (Fráncfort) – eu-central-1

  • Europa (Irlanda) – eu-west-1

  • UE (Londres) – eu-west-2

  • Europa (Parí) – eu-west-3

  • Europa (Estocolm) – eu-north-1

  • América del Sur (São Paulo) – sa-east-1

Periodo de retención

Las métricas de S3 Storage Lens se retienen para que pueda ver las tendencias históricas y comparar las diferencias en el uso y la actividad de almacenamiento a lo largo del tiempo. Puede utilizar las métricas de Amazon S3 Storage Lens para consultas de modo que pueda ver las tendencias históricas y comparar las diferencias en el uso y la actividad de almacenamiento a lo largo del tiempo.

Todas las métricas de S3 Storage Lens se retienen durante un periodo de 15 meses. Sin embargo, las métricas solo están disponibles para consultas de una duración específica, que depende de la selección de métricas. Esta duración no se puede modificar. Las métricas gratuitas están disponibles para consultas durante un periodo de 14 días y las métricas avanzadas para consultas durante un periodo de 15 meses.

Categorías de métricas

Dentro de los niveles gratuito y avanzado, las métricas de Lente de almacenamiento de S3 se organizan en categorías que se alinean con los casos de uso clave, como la optimización de costos y la protección de datos. Las métricas gratuitas incluyen métricas de resumen, optimización de costos, protección de datos, gestión de acceso, rendimiento y eventos. Al actualizar a recomendaciones y métricas avanzadas, puede habilitar métricas adicionales de optimización de costes y protección de datos que puede utilizar para reducir aún más los costes de almacenamiento de S3 y garantizar la protección de sus datos. También puede habilitar las métricas de actividad y las métricas de código de estado detalladas que puede usar para mejorar el rendimiento de las cargas de trabajo de las aplicaciones.

La siguiente lista muestra todas las categorías de métricas gratuitas y avanzadas. Para obtener una lista completa de las métricas individuales incluidas en cada categoría, consulte el Metrics glossary (Glosario de métricas).

Métricas de resumen

Las métricas de resumen proporcionan información general sobre el almacenamiento de S3, incluido el total de bytes de almacenamiento y el recuento de objetos.

Métricas de optimización de costos

Las métricas de optimización de costos proporcionan información que puede utilizar para administrar y optimizar los costos de almacenamiento. Por ejemplo, puede identificar los buckets que tengan cargas multipartes incompletas con más de 7 días de antigüedad.

Con las métricas y recomendaciones avanzadas, puede habilitar métricas de optimización de costos avanzadas. Estas métricas incluyen las métricas del recuento de reglas del ciclo de vida de S3 que puede utilizar para obtener los recuentos de reglas del ciclo de vida de S3 de vencimiento y transición por bucket.

Métricas de protección de datos

Las métricas de protección de datos proporcionan información sobre las características de protección de datos, como el cifrado y el control de versiones de S3. Puede utilizar estas métricas para identificar los buckets que no siguen las prácticas recomendadas de protección de datos. Por ejemplo, puede identificar los buckets que no usan el cifrado predeterminado con las claves de AWS Key Management Service (SSE-KMS) o el control de versiones de S3.

Con las métricas y recomendaciones avanzadas, puede habilitar métricas de protección de datos avanzadas. Estas métricas incluyen métricas de recuento de reglas de replicación por bucket.

Métricas de administración de acceso

Las métricas de administración de acceso proporcionan información sobre la propiedad de los objetos de S3. Puede usar estas métricas para ver qué configuración de propiedad de objetos utilizan los buckets.

Métricas de evento

Las métricas de eventos proporcionan información para las notificaciones de eventos de S3. Con las métricas de eventos, puede ver qué buckets tienen configuradas las notificaciones de eventos de S3.

Métricas de desempeño

Las métricas de rendimiento proporcionan información sobre S3 Transfer Acceleration. Con las métricas de rendimiento, puede ver qué buckets tienen habilitada Transfer Acceleration.

Métricas de actividad (avanzadas)

Si actualiza el panel con Métricas y recomendaciones avanzadas, puede habilitar las métricas de actividad. Las métricas de actividad proporcionan detalles sobre cómo se solicita el almacenamiento (por ejemplo, todas las solicitudes, las solicitudes Get, las solicitudes Put), los bytes cargados o descargados y los errores.

Las métricas de actividad de nivel de prefijo se pueden utilizar para ayudarle a determinar qué prefijos se utilizan con poca frecuencia, de modo que pueda realizar la transición a una clase de almacenamiento más óptima con S3 Lifecycle.

Métricas de código de estado detalladas (procedimiento avanzado)

Si actualiza el panel con Métricas y recomendaciones avanzadas, puede habilitar las métricas de código de estado detalladas. Las métricas de código de estado detalladas proporcionan información para los códigos de estado HTTP, como 403 Prohibido y 503 Servicio no disponible, que puede utilizar para solucionar problemas de acceso o rendimiento. Por ejemplo, puede consultar la métrica 403 Forbidden error count (Recuento de error 403 Forbidden [Prohibido]) para identificar las cargas de trabajo que acceden a los buckets sin haberse aplicado los permisos correctos.

Las métricas detalladas de los códigos de estado en el nivel de prefijo se pueden utilizar para comprender mejor las coincidencias de códigos de estado HTTP por prefijo. Por ejemplo, las métricas de recuento de errores 503 permiten identificar los prefijos que reciben solicitudes de limitación durante la ingesta de datos.

Recomendaciones

S3 Storage Lens proporciona recomendaciones automatizadas para ayudarlo a optimizar su almacenamiento. Las recomendaciones se colocan contextualmente junto con las métricas relevantes en el panel de S3 Storage Lens. Los datos históricos no son elegibles para las recomendaciones porque estas son relevantes en lo que sucede en el periodo más reciente. Las recomendaciones aparecen solo cuando son relevantes.

Las recomendaciones de S3 Storage Lens tienen las siguientes formas:

  • Sugerencias

    Las sugerencias le alertan sobre tendencias dentro de la actividad y el almacenamiento que podrían indicar una oportunidad de optimización de costes de almacenamiento o prácticas recomendadas de protección de datos. Puede utilizar los temas sugeridos en la Guía para usuarios de Amazon S3 y en el panel de S3 Storage Lens con el fin de obtener más detalles sobre las regiones, los buckets o los prefijos específicos.

  • Avisos

    Los avisos son recomendaciones que lo alertan sobre anomalías interesantes dentro de su actividad y almacenamiento durante un periodo que podría requerir más atención o monitorización.

    • Avisos atípicos

      S3 Storage Lens proporciona avisos para métricas que son valores atípicos, según la tendencia reciente de 30 días. El valor atípico se calcula con una puntuación estándar, también conocida como puntuación z. En esta puntuación, la métrica del día actual se resta del promedio de los últimos 30 días para esa métrica. A continuación, la métrica del día actual se divide por la desviación estándar para esa métrica en los últimos 30 días. La puntuación resultante suele estar entre -3 y +3. Este número representa la cantidad de desviaciones estándar que tiene la métrica del día actual de la media.

      S3 Storage Lens considera que las métricas con una puntuación >2 o <-2 son valores atípicos porque son superiores o inferiores al 95 % de los datos distribuidos normalmente.

    • Avisos sobre cambios significativos

      El aviso sobre cambios significativos se aplica a las métricas que se espera que cambien con menos frecuencia. Por lo tanto, se establece en una sensibilidad mayor que el cálculo de valores atípicos, que normalmente está en el rango de +/- 20 % en comparación con el día, la semana o el mes anterior.

      Abordar los avisos en su almacenamiento y actividad: si recibe un aviso sobre cambios significativos, no es necesariamente un problema. El aviso podría deberse a un cambio anticipado en su almacenamiento. Por ejemplo, es posible que haya agregado recientemente un gran número de objetos nuevos, eliminado un gran número de objetos o realizado cambios planificados similares.

      Si ve un aviso sobre cambios significativos en el panel, tome nota de ello y determine si se puede explicar por circunstancias recientes. Si no es así, utilice el panel de S3 Storage Lens para profundizar en más detalles y comprender las regiones, los buckets o los prefijos específicos que impulsan la fluctuación.

  • Recordatorios

    Los recordatorios proporcionan información sobre cómo funciona Amazon S3. Pueden ayudarle a obtener más información sobre las formas de utilizar las características de S3 para reducir los costos de almacenamiento o aplicar las prácticas recomendadas de protección de datos.

Selección de métricas

S3 Storage Lens ofrece dos selecciones de métricas que puede elegir para su panel y exportar: métricas gratuitas y métricas y recomendaciones avanzadas.

  • Métricas gratuitas

    S3 Storage Lens ofrece métricas gratuitas para todos los paneles y configuraciones. Las métricas gratuitas contienen métricas que son relevantes para el almacenamiento, como la cantidad de buckets y los objetos de la cuenta. Las métricas gratuitas también incluyen métricas basadas en casos de uso (por ejemplo, métricas de optimización de costos y protección de datos) que puede utilizar para investigar si el almacenamiento está configurado de acuerdo con las prácticas recomendadas de S3. Todas las métricas gratuitas se recopilan diariamente. Los datos están disponibles para consultas durante 14 días. Para obtener más información sobre las métricas que están disponibles con las métricas gratuitas, consulte Glosario de métricas de Amazon S3 Storage Lens.

  • Métricas y recomendaciones avanzadas

    S3 Storage Lens ofrece métricas gratuitas para todos los paneles y configuraciones con la opción de actualizar a métricas y recomendaciones avanzadas. Se aplican cargos adicionales. Para obtener más información, consulte Precios de Amazon S3.

    Las métricas y recomendaciones avanzadas incluyen todas las métricas de las métricas gratuitas junto con métricas adicionales, como las métricas de protección de datos y optimización de costos avanzadas, las métricas de actividad y las métricas de código de estado detalladas. Las métricas y las recomendaciones avanzadas también proporcionan recomendaciones para ayudarle a optimizar el almacenamiento. Las recomendaciones se colocan contextualmente junto con las métricas relevantes en el panel.

    Las métricas y recomendaciones avanzadas incluyen las siguientes características:

    • Métricas avanzadas: genere métricas adicionales. Para obtener una lista completa de categorías de métricas avanzadas, consulte Categorías de métricas. Para obtener una lista completa de métricas, consulte Glosario de métricas de Amazon S3 Storage Lens.

    • Publicación de Amazon CloudWatch: publica métricas de S3 Storage Lens en CloudWatch para crear una vista unificada del estado operativo en los paneles de CloudWatch. También puede utilizar las características y operaciones de la API de CloudWatch, como alarmas y acciones desencadenadas, cálculos de métricas y detección de anomalías para monitorear y tomar medidas en las métricas de Lente de almacenamiento de S3. Para obtener más información, consulte Monitoreo de métricas de S3 Storage Lens en CloudWatch.

    • Agregación de prefijo: recopile métricas en el nivel de prefijo. Al habilitar la agregación de prefijos, se amplían todas las métricas incluidas en la configuración del panel en el nivel de prefijo. Las métricas solo se generan para los prefijos que cumplen con el umbral configurado. Tenga en cuenta que las métricas que son aplicables en el nivel de prefijo están disponibles con la Agregación de prefijos, excepto las métricas de configuración de nivel de bucket y de recuento de reglas. Las métricas de nivel de prefijo no se publican en CloudWatch.

    • Agregación de grupos de Storage Lens: recopila métricas en el nivel de grupo de Storage Lens. Tras habilitar Métricas y recomendaciones avanzadas y Agregación de grupos de Storage Lens, puede especificar qué grupos de Storage Lens desea incluir o excluir del panel de Storage Lens. Debe especificarse al menos un grupo de Storage Lens. Los grupos de Storage Lens que se especifiquen también deben encontrarse en la región de origen designada de la cuenta del panel. Las métricas de nivel de grupo de Storage Lens no se publican en CloudWatch.

    Todas las métricas avanzadas se recopilan diariamente. Los datos están disponibles para consultas durante 15 meses. Para obtener más información acerca de las métricas de almacenamiento que se agregan por Lente de almacenamiento de S3, consulte Glosario de métricas de Amazon S3 Storage Lens.

    nota

    Las recomendaciones solo están disponibles cuando utiliza el panel de S3 Storage Lens en la consola de Amazon S3.

S3 Storage Lens y AWS Organizations

AWS Organizations es un Servicio de AWS que le ayuda a agregar todas las Cuentas de AWS bajo una jerarquía de organización. Amazon S3 Storage Lens trabaja con AWS Organizations para proporcionar una vista única de la actividad y almacenamiento de objetos en todo el almacenamiento de Amazon S3.

Para obtener más información, consulte Uso de Amazon S3 Storage Lens con AWS Organizations.

  • Acceso de confianza

    Con la cuenta de administración de la organización, debe habilitar el acceso de confianza para Lente de almacenamiento de S3 a fin de agregar métricas de almacenamiento y datos de uso para todas las cuentas de miembros de la organización. A continuación, puede crear paneles o exportaciones para la organización mediante la cuenta de administración o brindando acceso de administrador delegado a otras cuentas de la organización.

    Puede deshabilitar el acceso de confianza para S3 Storage Lens en cualquier momento, lo que impide que S3 Storage Lens agregue métricas para su organización.

  • Administrador delegado

    Puede crear paneles y métricas para Lente de almacenamiento de S3 destinados a la organización mediante la cuenta de administración de AWS Organizations u otorgando acceso de administrador delegado a otras cuentas de la organización. Puede anular el registro de los administradores delegados en cualquier momento. La anulación del registro de un administrador delegado también impide automáticamente que todos los paneles de nivel de organización que haya creado ese administrador delegado agreguen nuevas métricas de almacenamiento.

Para obtener más información, consulte Amazon S3 Storage Lens y AWS Organizations en la Guía del usuario de AWS Organizations.

Roles vinculados a servicios de Amazon S3 Storage Lens

Junto con el acceso de confianza de AWS Organizations, Amazon S3 Storage Lens utiliza roles vinculados a servicios de AWS Identity and Access Management (IAM). Un rol vinculado a un servicio es un tipo único de rol de IAM que está vinculado directamente a S3 Storage Lens. Los roles vinculados a servicios están predefinidos por S3 Storage Lens e incluyen todos los permisos necesarios para recopilar las métricas diarias de actividad y almacenamiento de las cuentas de miembros de su organización.

Para obtener más información, consulte Uso de roles vinculados a servicios para Amazon S3 Storage Lens.