Visão geral do machine learning no Amazon EKS

O machine learning (ML) é uma área da inteligência artificial (IA) em que as máquinas processam grandes quantidades de dados para procurar padrões e fazer conexões entre os dados. Isso pode expor novos relacionamentos e ajudar a prever resultados que talvez não fossem aparentes de outra forma.

Para projetos de ML de grande escala, os data centers devem ser capazes de armazenar grandes quantidades de dados, processar dados rapidamente e integrar dados de várias fontes. As plataformas que executam aplicações de ML devem ser confiáveis e seguras, mas também oferecer resiliência para se recuperar de interrupções no data center e falhas de aplicações. O AWS Elastic Kubernetes Service (EKS), executado na nuvem da AWS, é especialmente adequado para workloads de ML.

O objetivo principal desta seção do Guia do usuário do EKS é ajudar você a reunir os componentes de hardware e software para criar plataformas para executar workloads de machine learning em um cluster do EKS. Começamos explicando os atributos e serviços disponíveis no EKS e na nuvem da AWS, e, em seguida, fornecemos tutoriais para ajudar você a trabalhar com plataformas, estruturas e modelos de ML.

Vantagens do machine learning no EKS e na nuvem da AWS

O Amazon Elastic Kubernetes Service (EKS) é uma plataforma de Kubernetes poderosa e gerenciada que se tornou a base para a implantação e o gerenciamento de workloads de IA/ML na nuvem. Com sua capacidade de lidar com tarefas complexas e que consomem muitos recursos, o Amazon EKS fornece uma base escalável e flexível para a execução de modelos de IA/ML, tornando-o a escolha ideal para organizações que desejam aproveitar todo o potencial do machine learning.

As principais vantagens das plataformas de IA/ML no Amazon EKS incluem:

• Escalabilidade e flexibilidade: o Amazon EKS permite que as organizações escalem workloads de IA/ML sem problemas. Se você está treinando grandes modelos de linguagem que exigem grandes quantidades de poder computacional ou implantando pipelines de inferência que precisam lidar com padrões de tráfego imprevisíveis, o EKS aumenta e diminui a escala verticalmente de forma eficiente, otimizando o uso e o custo dos recursos.

• Alta performance com GPUs e instâncias Neuron: o Amazon EKS oferece suporte a uma ampla variedade de opções de computação, incluindo GPUs e instâncias AWS Neuron, que são essenciais para acelerar as workloads de IA/ML. Esse suporte permite treinamento de alta performance e inferência de baixa latência, garantindo que os modelos sejam executados com eficiência em ambientes de produção.

• Integração com ferramentas de IA/ML: o Amazon EKS se integra perfeitamente a ferramentas e estruturas populares de IA/ML, como TensorFlow, PyTorch e Ray, fornecendo um ecossistema familiar e robusto para cientistas e engenheiros de dados. Essas integrações permitem que os usuários aproveitem as ferramentas existentes enquanto se beneficiam dos recursos de escalabilidade e gerenciamento do Kubernetes.

• Automação e gerenciamento: o Kubernetes no Amazon EKS automatiza muitas das tarefas operacionais associadas ao gerenciamento de workloads de IA/ML. Atributos como escalabilidade automática, atualizações contínuas e recuperação automática garantem que suas aplicações permaneçam altamente disponíveis e resilientes, reduzindo a sobrecarga da intervenção manual.

• Segurança e conformidade: a execução de workloads de IA/ML no Amazon EKS fornece atributos de segurança robustos, incluindo perfis do IAM refinados, criptografia e políticas de rede, garantindo que dados e modelos confidenciais sejam protegidos. O EKS também adere a vários padrões de conformidade, tornando-o adequado para empresas com requisitos regulatórios rígidos.

Por que escolher o Amazon EKS para IA/ML?

O Amazon EKS oferece um ambiente abrangente e gerenciado que simplifica a implantação de modelos de IA/ML e, ao mesmo tempo, fornece a performance, a escalabilidade e a segurança necessários para workloads de produção. Com sua capacidade de integração com uma variedade de ferramentas de IA/ML e seu suporte a recursos computacionais avançados, o EKS capacita as organizações a acelerar suas iniciativas de IA/ML e oferecer soluções inovadoras em grande escala.

Ao escolher o Amazon EKS, você obtém acesso a uma infraestrutura robusta que pode lidar com as complexidades das workloads modernas de IA/ML, permitindo que você se concentre na inovação e na criação de valor, em vez de gerenciar sistemas subjacentes. Se você estiver implantando modelos simples ou sistemas complexos de IA, o Amazon EKS fornece as ferramentas e os recursos necessários para ter sucesso em um campo competitivo e em rápida evolução.

Comece a usar machine learning no EKS

Para começar a planejar e usar plataformas e workloads de machine learning no EKS na nuvem da AWS, vá para a seção Conceitos básicos da ML.