Engenharia de dados da AWS: construção de pipelines de análise

O gerenciamento de fluxos de dados em grande escala requer uma infraestrutura segura, escalável e eficiente.Este curso baseado em texto orienta você pelo processo de criação de pipelines de dados modernos usando o ecossistema de análise da AWS. Você passará da compreensão do armazenamento básico em nuvem para o projeto de pipelines de dados de ponta a ponta que ingeriram, processaram, armazenaram e consultam dados.Ao estudar explicações arquitetônicas claras e analisar exemplos de código estruturado, você obterá o conhecimento prático necessário para orquestrar fluxos de trabalho de dados complexos na nuvem. O que você vai aprender: - Entenda os principais conceitos de dados em nuvem, configurações de segurança e gerenciamento de identidade usando o AWS S3 e o IAM. - Crie pipelines de ingestão em lote e em tempo real escaláveis usando o AWS Lambda, o Kinesis e o Glue. - Processe conjuntos de dados em grande escala com o PySpark no AWS EMR e gerencie catálogos de metadados usando o AWS Glue. - Consulte dados diretamente no S3 usando o Athena e execute operações de armazenamento de dados de alto desempenho no Redshift. - Aplique padrões de design de data lakehouse modernos, incluindo formatos de tabela transacional como o Apache Iceberg na AWS. - Configure implantações de pipeline de dados automatizadas usando conceitos fundamentais de Infraestrutura como Código. O currículo começa com definições fundamentais de armazenamento e segurança em nuvem antes de avançar para a ingestão de dados, processamento distribuído com Spark, consulta sem servidor e armazenamento de dados.Você estudará guias escritos passo a passo e trechos de código SQL / Python projetados para aumentar sua confiança em engenharia. Este curso foi projetado para aspirantes a engenheiros de dados, administradores de banco de dados e desenvolvedores de software que são novos nos serviços de análise da AWS. Comece a ler hoje para construir sua base em engenharia de dados em nuvem.