Criação e atualização dos painéis do Amazon S3 Storage Lens - Amazon Simple Storage Service
Criação de um painel do Amazon S3 Storage LensAtualização de um painel do Amazon S3 Storage Lens

Criação e atualização dos painéis do Amazon S3 Storage Lens

A Lente de Armazenamento do S3 agrega suas métricas e exibe as informações na seção Account snapshot (Snapshot da conta) na página Buckets do console do Amazon S3. A Lente de Armazenamento do S3 também oferece um painel interativo para visualizar insights e tendências, sinalizar discrepâncias e receber recomendações para otimizar os custos de armazenamento e aplicar as práticas recomendadas de proteção de dados. O painel tem opções de detalhamento para gerar e visualizar insights no nível da organização, conta, Região da AWS, classe de armazenamento, bucket, prefixo ou grupo de Lente de Armazenamento. Você também pode enviar uma exportação diária de métricas em CSV ou no formato Parquet para um bucket do S3.

O painel padrão do Amazon S3 Storage Lens é o painel de conta padrão. Esse painel é pré-configurado pelo Amazon S3 para ajudar você a visualizar tendências e insights resumidos para as métricas gratuitas e avançadas agregadas de toda a sua conta no console. Você não pode modificar o escopo de configuração padrão do painel, mas pode atualizar a seleção de métricas das métricas gratuitas para as métricas e recomendações avançadas pagas, configurar a exportação opcional de métricas ou até mesmo desativar o painel padrão. O painel padrão não pode ser excluído.

Você também pode criar painéis personalizados adicionais da Lente de Armazenamento do S3 que podem ser colocados no escopo de sua organização no AWS Organizations ou em regiões ou buckets específicos em uma conta.

Criação de um painel do Amazon S3 Storage Lens

Use as etapas a seguir para criar um painel do Amazon S3 Storage Lens no console do Amazon S3.

Etapa 1: Definir o escopo do painel

  1. Faça login no AWS Management Console e abra o console do Amazon S3 em https://console.aws.amazon.com/s3/.

  2. Na barra de navegação na parte superior da página, escolha o nome da região da AWS exibida no momento. Em seguida, escolha a região para a qual você deseja mudar.

  3. No painel de navegação esquerdo, em Lente de Armazenamento do S3, selecione Painéis.

  4. Escolha Create dashboard (Criar painel).

  5. Na página Dashboard (Painel), na seção General (Geral), faça o seguinte:

    1. Visualize a Região de origem para seu painel. A região de origem é a Região da AWS em que a configuração e as métricas referentes a esse painel do Lente de Armazenamento estão armazenadas.

    2. Insira um nome de painel.

      Os nomes do painel devem ter menos de 65 caracteres e não devem conter caracteres ou espaços especiais.

      nota

      Não é possível alterar o nome do painel depois que o painel for criado.

    3. Opcionalmente, você pode optar por adicionar Tags ao seu painel. Você pode usar tags para gerenciar permissões para seu painel e rastrear os custos para o S3 Storage Lens.

      Para obter mais informações, consulte Controle do acesso usando tags de recurso no Guia do usuário do IAM e Tags de alocação de custos geradas pela AWS no Guia do usuário do AWS Billing.

      nota

      Você pode adicionar até 50 tags à configuração do painel.

  6. Na seção Dashboard scope (Escopo do painel), faça o seguinte:

    1. Escolha as regiões e os buckets que deseja que o S3 Storage Lens inclua ou exclua no painel.

    2. Escolha os buckets nas regiões selecionadas que deseja que o S3 Storage Lens inclua ou exclua. Você pode incluir ou excluir buckets, mas não ambos. Essa opção não está disponível quando você cria painéis no nível da organização.

    nota

    • Você pode incluir ou excluir regiões e buckets. Essa opção é limitada a regiões somente ao criar painéis no nível da organização em contas de membro na sua organização.

    • Você pode escolher até 50 buckets para incluir ou excluir.

Etapa 2: Configurar a seleção de métricas

  1. Na seção Metrics selection (Seleção de métricas), escolha o tipo de métricas que você deseja agregar para este painel.

    • Para incluir métricas gratuitas agregadas por bucket e disponíveis para consultas por 14 dias, escolha Free metrics (Métricas gratuitas).

    • Para ativar métricas avançadas e outras opções avançadas, escolha Advanced metrics and recommendations (Métricas e recomendações avançadas). Essas opções incluem agregação avançada de prefixos, publicação do Amazon CloudWatch e recomendações contextuais. Os dados ficam disponíveis para consultas por 15 meses. As métricas e recomendações avançadas têm um custo adicional. Para obter mais informações, consulte Definição de preço do Amazon S3.

      Para obter mais informações sobre métricas avançadas e métricas gratuitas, consulte Seleção de métricas.

  2. Em Advanced metrics and recommendations features (Recursos de métricas e recomendações avançadas), selecione as opções que deseja habilitar:

    • Advanced metrics (Métricas avançadas)

    • Publicação no CloudWatch

    • Agregação de prefixo

    Importante

    Se você habilitar a agregação de prefixos na configuração do S3 Storage Lens, as métricas de nível de prefixo não serão publicadas no CloudWatch. Somente métricas em nível de organização, conta e bucket do S3 Storage Lens são publicadas no CloudWatch.

  3. Se você ativou Advanced metrics (Métricas avançadas), selecione as Advanced metrics categories (Categorias de métricas avançadas) que deseja exibir no painel da Lente de Armazenamento do S3:

    • Métricas de atividade

    • Detailed status code metrics (Métricas detalhadas do código de status)

    • Advanced cost optimization metrics (Métricas avançadas de otimização de custos)

    • Advanced data protection metrics (Métricas avançadas de proteção de dados)

    Para obter mais informações sobre categorias de métricas, consulte Categorias de métricas. Para obter uma lista completa de métricas, consulte Glossário de métricas de lente de armazenamento do Amazon S3.

  4. Caso tenha optado por habilitar a agregação de prefixos, configure o seguinte:

    1. Escolha o tamanho mínimo de limite de prefixo para este painel.

      Por exemplo, um limite de prefixo de 5% indica que serão agregados os prefixos que compõem 5% ou mais do tamanho total do armazenamento do bucket.

    2. Escolha o nome do prefixo.

      Essa configuração indica o número máximo de níveis até os quais os prefixos são avaliados. A profundidade do prefixo deve ser inferior a 10.

    3. Insira um caractere delimitador de prefixo.

      Este valor é usado para identificar cada nível de prefixo. O valor padrão no Amazon S3 é o caractere /, mas sua estrutura de armazenamento pode usar outros caracteres delimitadores.

(Opcional) Etapa 3: Exportar métricas para o painel

  1. Na seção Metrics export (Exportação de métricas), escolha Enable (Ativar) para criar uma exportação de métricas que será colocada diariamente em um bucket de destino de sua escolha.

    A exportação de métricas acontece no formato CSV ou Apache Parquet. Ele representa o mesmo escopo de dados que os dados do painel do S3 Storage Lens sem as recomendações.

  2. Se a exportação de métricas foi ativada, escolha o formato de saída da exportação diária: CSV ou Apache Parquet.

    Parquet é um formato de arquivo de código aberto para Hadoop que armazena dados aninhados em um formato colunar plano.

  3. Escolha o bucket do S3 de destino para sua exportação de métricas.

    Você pode escolher um bucket na conta atual do painel do S3 Storage Lens. Ou você poderá escolher outra Conta da AWS se tiver as permissões do bucket de destino e o ID da conta do proprietário do bucket de destino.

  4. Escolha o bucket do S3 de destino (formato: s3://bucket-name/prefix).

    O bucket deve estar na região inicial do seu painel da Lente de Armazenamento do S3. O console do S3 mostra a Destination bucket permission (Permissão do bucket de destino) que será adicionada pelo Amazon S3 à política do bucket de destino. O Amazon S3 atualiza a política no bucket de destino para permitir que o S3 coloque dados nesse bucket.

  5. (Opcional) Para habilitar a criptografia do lado do servidor para a exportação de métricas, escolha Specify an encryption key (Especificar uma chave de criptografia). Depois, escolha Tipo de criptografia: Chaves gerenciadas do Amazon S3 (SSE-S3) ou Chave do AWS Key Management Service (SSE-KMS).

    Você pode escolher entre uma chave gerenciada pelo Amazon S3 (SSE-S3) e uma chave do AWS Key Management Service (AWS KMS) (SSE-KMS).

  6. (Opcional) Para especificar uma chave do AWS KMS, você deve escolher uma chave do KMS ou inserir o nome do recurso da Amazon (ARN) de uma chave.

    Se escolher uma chave gerenciada pelo cliente, você deverá conceder permissão de criptografia à Lente de Armazenamento do S3 na política de chaves do AWS KMS. Para ter mais informações, consulte Usar uma AWS KMS key para criptografar suas exportações de métricas.

  7. Escolha Create dashboard (Criar painel).

Para obter mais visibilidade do seu armazenamento, você pode criar um ou mais grupos da Lente de Armazenamento do S3 e anexá-los ao seu painel. Um grupo da Lente de Armazenamento do S3 é um filtro personalizado definido para objetos com base em prefixos, sufixos, tags de objeto, tamanho do objeto, idade do objeto ou uma combinação desses filtros.

Você pode usar grupos da Lente de Armazenamento do S3 para obter visibilidade granular de grandes buckets compartilhados, como data lakes, para tomar decisões de negócios mais bem informadas. Por exemplo, você pode simplificar a alocação de armazenamento e otimizar os relatórios de custos dividindo o uso do armazenamento em grupos específicos de objetos para projetos individuais e centros de custo dentro de um bucket ou em vários buckets.

Para usar grupos da Lente de Armazenamento do S3, você deve atualizar o painel para usar métricas e recomendações avançadas. Para obter mais informações sobre grupos de Lente de Armazenamento do S3, consulte Trabalho com grupos de Lente de Armazenamento do S3.

Atualização de um painel do Amazon S3 Storage Lens

Use as etapas a seguir para atualizar um painel do Amazon S3 Storage Lens no console do Amazon S3.

Etapa 1: Atualizar o escopo do painel

  1. Faça login no AWS Management Console e abra o console do Amazon S3 em https://console.aws.amazon.com/s3/.

  2. No painel de navegação esquerdo, escolha Storage Lens, Dashboards (Lente de Armazenamento, Painéis).

  3. Escolha o painel que você deseja editar e escolha Edit (Editar).

    A página Edit dashboard (Editar painel) é aberta.

    nota

    Você não pode alterar o seguinte:

    • O nome do painel

    • A região inicial

    • O escopo do painel padrão, que tem escopo para o armazenamento de toda a sua conta

  4. (Opcional) Na página de configuração do painel, na seção General (Geral), atualize e adicione etiquetas ao seu painel.

    Você pode usar tags para gerenciar permissões para seu painel e rastrear os custos para o S3 Storage Lens. Para obter mais informações, consulte Controle do acesso usando tags de recurso no Guia do usuário do IAM e Tags de alocação de custos geradas pela AWS no Guia do usuário do AWS Billing.

    nota

    Você pode adicionar até 50 tags à configuração do painel.

  5. Na seção Dashboard scope (Escopo do painel), faça o seguinte:

    1. Atualize as regiões e os buckets que deseja que o S3 Storage Lens inclua ou exclua no painel.

      nota

      • Você pode incluir ou excluir regiões e buckets. Essa opção é limitada a regiões somente ao criar painéis no nível da organização em contas de membro na sua organização.

      • Você pode escolher até 50 buckets para incluir ou excluir.

    2. Atualize os buckets nas regiões selecionadas que deseja que o S3 Storage Lens inclua ou exclua. Você pode incluir ou excluir buckets, mas não ambos. Esta opção não está presente ao criar painéis no nível da organização.

Etapa 2: Atualizar a seleção de métricas

  1. Na seção Metrics selection (Seleção de métricas), escolha o tipo de métricas que você deseja agregar para este painel.

    • Para incluir métricas gratuitas agregadas por bucket e disponíveis para consultas por 14 dias, escolha Free metrics (Métricas gratuitas).

    • Para ativar métricas avançadas e outras opções avançadas, escolha Advanced metrics and recommendations (Métricas e recomendações avançadas). Essas opções incluem agregação avançada de prefixos, publicação do Amazon CloudWatch e recomendações contextuais. Os dados ficam disponíveis para consultas por 15 meses. As métricas e recomendações avançadas têm um custo adicional. Para obter mais informações, consulte Definição de preço do Amazon S3.

      Para obter mais informações sobre métricas avançadas e métricas gratuitas, consulte Seleção de métricas.

  2. Em Advanced metrics and recommendations features (Recursos de métricas e recomendações avançadas), selecione as opções que deseja habilitar:

    • Advanced metrics (Métricas avançadas)

    • Publicação no CloudWatch

    • Agregação de prefixo

    Importante

    Se você habilitar a agregação de prefixos na configuração do S3 Storage Lens, as métricas de nível de prefixo não serão publicadas no CloudWatch. Somente métricas em nível de organização, conta e bucket do S3 Storage Lens são publicadas no CloudWatch.

  3. Se você ativou Advanced metrics (Métricas avançadas), selecione as Advanced metrics categories (Categorias de métricas avançadas) que deseja exibir no painel da Lente de Armazenamento do S3:

    • Métricas de atividade

    • Detailed status code metrics (Métricas detalhadas do código de status)

    • Advanced cost optimization metrics (Métricas avançadas de otimização de custos)

    • Advanced data protection metrics (Métricas avançadas de proteção de dados)

    Para obter mais informações sobre categorias de métricas, consulte Categorias de métricas. Para obter uma lista completa de métricas, consulte Glossário de métricas de lente de armazenamento do Amazon S3.

  4. Caso tenha optado por habilitar a agregação de prefixos, configure o seguinte:

    1. Escolha o tamanho mínimo de limite de prefixo para este painel.

      Por exemplo, um limite de prefixo de 5% indica que serão agregados os prefixos que compõem 5% ou mais do tamanho total do armazenamento do bucket.

    2. Escolha o nome do prefixo.

      Essa configuração indica o número máximo de níveis até os quais os prefixos são avaliados. A profundidade do prefixo deve ser inferior a 10.

    3. Insira um caractere delimitador de prefixo.

      Este é o valor usado para identificar cada nível de prefixo. O valor padrão no Amazon S3 é o caractere /, mas sua estrutura de armazenamento pode usar outros caracteres delimitadores.

(Opcional) Etapa 3: Exportar métricas para o painel

  1. Na seção Metrics export (Exportação de métricas), escolha Enable (Ativar) para criar uma exportação de métricas que será colocada diariamente em um bucket de destino de sua escolha. Para desativar a exportação de métricas, escolha Disable (Desativar).

    A exportação de métricas acontece no formato CSV ou Apache Parquet. Ele representa o mesmo escopo de dados que os dados do painel do S3 Storage Lens sem as recomendações.

  2. Se ativada, escolha o formato de saída da exportação de métricas diária: CSV ou Apache Parquet.

    Parquet é um formato de arquivo de código aberto para Hadoop que armazena dados aninhados em um formato colunar plano.

  3. Escolha o bucket do S3 de destino para sua exportação de métricas.

    Você pode escolher um bucket na conta atual do painel do S3 Storage Lens. Ou você poderá escolher outra Conta da AWS se tiver as permissões do bucket de destino e o ID da conta do proprietário do bucket de destino.

  4. Escolha o bucket do S3 de destino (formato: s3://bucket-name/prefix).

    O bucket deve estar na região inicial do seu painel da Lente de Armazenamento do S3. O console do S3 mostra a Destination bucket permission (Permissão do bucket de destino) que será adicionada pelo Amazon S3 à política do bucket de destino. O Amazon S3 atualiza a política no bucket de destino para permitir que o S3 coloque dados nesse bucket.

  5. (Opcional) Para habilitar a criptografia do lado do servidor para a exportação de métricas, escolha Specify an encryption key (Especificar uma chave de criptografia). Depois, escolha Tipo de criptografia: Chaves gerenciadas do Amazon S3 (SSE-S3) ou Chave do AWS Key Management Service (SSE-KMS).

    Você pode escolher entre uma chave gerenciada pelo Amazon S3 (SSE-S3) e uma chave do AWS Key Management Service (AWS KMS) (SSE-KMS).

  6. (Opcional) Para especificar uma chave do AWS KMS, você deve escolher uma chave do KMS ou inserir o nome do recurso da Amazon (ARN) de uma chave. Em Chave do AWS KMS, especifique sua chave do KMS de uma das seguintes maneiras:

    • Para escolher entre uma lista de chaves do KMS disponíveis, selecione Escolher entre suas AWS KMS keys e escolha sua chave do KMS na lista de chaves disponíveis.

      As chaves Chave gerenciada pela AWS (aws/s3) e as chaves gerenciadas pelo cliente são exibidas nessa lista. Para ter mais informações sobre chaves gerenciadas pelo cliente, consulte Chaves de clientes e chaves da AWS no Guia do desenvolvedor do AWS Key Management Service.

      nota

      A Chave gerenciada pela AWS (aws/S3) não é compatível com a criptografia SSE-KMS com a Lente de Armazenamento do S3.

    • Para inserir o ARN da chave do KMS, escolha Inserir ARN da AWS KMS key e insira o ARN da chave do KMS no campo exibido.

    • Para criar uma chave gerenciada pelo cliente no console do AWS KMS, selecione Criar uma chave do KMS.

      Se escolher uma chave gerenciada pelo cliente, você deverá conceder permissão de criptografia à Lente de Armazenamento do S3 na política de chaves do AWS KMS. Para ter mais informações, consulte Usar uma AWS KMS key para criptografar suas exportações de métricas.

      Para obter mais informações sobre como criar uma AWS KMS key, consulte Criação de chaves no Guia do desenvolvedor do AWS Key Management Service.

  7. Escolha Salvar alterações.

Para obter mais visibilidade do seu armazenamento, você pode criar um ou mais grupos da Lente de Armazenamento do S3 e anexá-los ao seu painel. Um grupo da Lente de Armazenamento do S3 é um filtro personalizado definido para objetos com base em prefixos, sufixos, tags de objeto, tamanho do objeto, idade do objeto ou uma combinação desses filtros.

Você pode usar grupos da Lente de Armazenamento do S3 para obter visibilidade granular de grandes buckets compartilhados, como data lakes, para tomar decisões de negócios mais bem informadas. Por exemplo, você pode simplificar a alocação de armazenamento e otimizar os relatórios de custos dividindo o uso do armazenamento em grupos específicos de objetos para projetos individuais e centros de custo dentro de um bucket ou em vários buckets.

Para usar grupos da Lente de Armazenamento do S3, você deve atualizar o painel para usar métricas e recomendações avançadas. Para obter mais informações sobre grupos de Lente de Armazenamento do S3, consulte Trabalho com grupos de Lente de Armazenamento do S3.