Nova integração do Elastic e do Amazon S3 Storage Lens: simplifique o gerenciamento, controle custos e reduza riscos

blog-thumb-cloud-aws.png

Conforme os dados e as aplicações vão crescendo a um ritmo exponencial, eles produzem logs, métricas e traces de forma acelerada, tornando o armazenamento e o gerenciamento ainda mais complexos. A nova integração do Elastic e do Amazon Simple Storage Service (Amazon S3) Storage Lens oferece aos clientes uma visão completa das métricas de utilização e atividade do Amazon S3 em toda a organização, juntamente com seus outros conjuntos de dados locais e da AWS.

SREs e engenheiros de DevOps agora podem usar as poderosas funcionalidades de busca e analítica da plataforma de busca da Elastic, incluindo criação de dashboards, análise de machine learning integrada e alertas baseados em limites, para identificar tendências e correlacionar os dados do Amazon S3 Storage Lens com outros indicadores de desempenho em seu ambiente. Essas informações também podem ser aproveitadas para otimizar os custos de armazenamento, identificando e migrando objetos acessados com pouca frequência para um armazenamento de menor custo.

Vamos ver mais detalhes sobre a integração do Elastic com o S3 Storage Lens e como enviar métricas do S3 Storage Lens para o Elastic Cloud facilmente.

Obtenha informações claras obre o uso do armazenamento

O Amazon S3 oferece armazenamento flexível e econômico; no entanto, a otimização da utilização e da economia de buckets de armazenamento em constante crescimento em uma grande organização pode apresentar desafios. Com a Elastic, as equipes de DevOps e infraestrutura podem visualizar, agregar e analisar as métricas do S3 Storage Lens juntamente com eventos de segurança, métricas de aplicações e logs do sistema para tomar decisões informadas sobre a otimização do armazenamento.

O Elastic Observability oferece visibilidade unificada em toda a nuvem e no ecossistema local para que os usuários possam monitorar eventos acontecendo em qualquer lugar do ambiente e reagir a eles. A Elastic reúne logs, métricas e traces em escala em uma única stack com machine learning para ajudar a detectar problemas de desempenho e identificar as causas raiz antes que os usuários finais sejam afetados.

  • Visualize as métricas do S3 Storage Lens juntamente com outros conjuntos de dados da AWS, como Amazon Elastic Compute Cloud (Amazon EC2) e Amazon S3 Glacier, além de outros conjuntos de dados locais e na nuvem.
  • Use modelagem de séries temporais para detectar anomalias nos dados atuais e projetar tendências com base nos dados históricos.
  • Receba uma notificação se as métricas de armazenamento de objetos do Amazon S3 ficarem acima ou abaixo de um determinado limite dentro de um intervalo de tempo definido, usando alertas de limite para determinar a utilização excessiva ou insuficiente do armazenamento, desde o nível organizacional até a conta ou o bucket do Amazon S3.
  • Mantenha os custos sob controle e dentro do orçamento identificando objetos prontos para arquivamento que podem ser migrados para outro armazenamento de menor custo, como Amazon S3 Glacier ou Amazon S3 Glacier Deep Archive.
  • Otimize o desempenho e a disponibilidade com funcionalidades abrangentes em monitoramento de infraestrutura, APM e monitoramento da experiência do usuário final, incluindo tracing distribuído de ponta a ponta, rastreamento de erros, mapeamento de dependência de serviço, tempo de funcionamento e integridade da API.

Os usuários podem instalar a integração do Elastic e do S3 Storage Lens diretamente da UI web do Kibana, que contém alertas pré-criados e dashboards interativos que ajudam as organizações a extrair rapidamente o máximo de valor de seus dados. A Elastic oferece diferentes opções de análise, desde dashboards pré-criados e totalmente customizáveis até UIs para casos de uso específicos, adaptadas aos fluxos de trabalho dos profissionais.

Detecte, investigue e responda às ameaças em evolução

Como a Elastic oferece um esquema comum e um repositório único, os mesmos dados de observabilidade do S3 Storage Lens e de outros conjuntos de dados também podem ser usados para detecção e resposta estendidas (XDR) com o objetivo de baixar o tempo médio até a detecção para zero. O Elastic Security reúne SIEM e segurança de endpoint, permitindo às organizações ingerir e reter grandes volumes de dados de diversas fontes, armazenar e buscar dados por mais tempo e ampliar a caça a ameaças com detecções e machine learning. Elimine silos de dados, reduza a fadiga dos alertas e prepare a organização para frear as ameaças rapidamente e na escala da nuvem.

Armazene dados, logs e métricas de forma econômica

A maioria das organizações retém dados históricos para entender melhor os padrões e melhorar suas operações, mas muitas vezes precisa enfrentar o desafio de reduzir os custos de armazenamento mantendo a acessibilidade dos dados. A boa notícia é que a Elastic possibilita que as organizações retenham grandes quantidades de dados históricos em armazenamento de objetos de baixo custo, como o Amazon S3, mantendo-os totalmente ativos e buscáveis. Assim, elas podem guardar com segurança seus logs, eventos e métricas locais e da AWS para fins de utilização, análise e conformidade. Mantenha os dados — em qualquer granularidade, por qualquer período — e redimensione o armazenamento conforme os dados forem aumentando. O gerenciamento de dados e a organização em camadas são automatizados por meio das funcionalidades de gestão de ciclo de vida de índice e redimensionamento automático, com base nos requisitos de desempenho, resiliência e retenção de dados da organização.

Como começar a usar o Elastic e o Amazon S3 Storage Lens

Este diagrama arquitetônico de referência é uma representação relativamente padrão do envio de várias métricas de buckets do S3 das métricas do Cloudwatch para o Elastic Cloud.

Etapas para implementação:

Vá para Management->Integrations (Gerenciamento->Integrações) na UI do Kibana e faça uma busca por S3 Storage Lens. Clique na integração do AWS S3 Storage Lens para ver mais detalhes; em seguida, clique em Add AWS S3 Storage Lens (Adicionar AWS S3 Storage Lens) e forneça a configuração apropriada; clique em Save integration (Salvar integração).

Forneça todas as informações necessárias para que os agentes coletem as métricas do AWS S3 Storage Lens. Vários métodos de credenciais da AWS são compatíveis, incluindo chaves de acesso, credenciais de segurança temporárias e ARN de função do IAM. Consulte mais detalhes na documentação de segurança e permissão.

As métricas do AWS S3 Storage Lens são publicadas no CloudWatch pela AWS uma vez a cada 24 horas. Os agentes da Elastic coletarão dados todos os dias por padrão ou com menos frequência com base na configuração do agente.

Navegue até o dashboard do Kibana para ver seus dados analisados no dashboard [Metrics AWS] S3 Storage Lens Overview (Visão geral das métricas do AWS S3 Storage Lens). Lembre-se de que pode levar até 24 horas para os dados aparecerem no dashboard pronto para uso.

Explore as métricas coletadas para vários casos de uso customizados usando o Kibana Lens.

Conclusão

Você está pronto(a) para reduzir a complexidade operacional e analisar dados de armazenamento de objetos do Amazon S3 com outros logs, métricas e traces juntos em uma única visualização? Essa integração otimizada com a AWS é apenas um exemplo de como a Elastic está constantemente iterando para fornecer aos clientes uma experiência sem atritos, permitindo que eles executem onde e como quiserem.

Para obter mais informações sobre outras integrações da AWS, acesse a biblioteca de integrações da Elastic. Para começar a usar o Elastic na AWS, acesse o AWS Marketplace (Elastic) ou o site elastic.co.

O lançamento e o tempo de amadurecimento de todos os recursos ou funcionalidades descritos neste documento permanecem a exclusivo critério da Elastic. Os recursos ou funcionalidades não disponíveis atualmente poderão não ser entregues dentro do prazo previsto ou nem chegar a ser entregues.

  • Estamos contratando

    Trabalhe para uma equipe global e distribuída, na qual podemos encontrar alguém como você está com apenas uma reunião do Zoom. Trabalho flexível com impacto? Oportunidades de desenvolvimento desde o início?