Хранение Azure Data Lake для облачного проектирования данных

Современные организации имеют дело с огромными объемами разнообразных данных, которые требуют больше чем просто традиционная база данных. Лазурное хранилище озера данных Gen2 обеспечивает необходимую основу для высокопроизводительного анализа, сочетая масштабируемость хранения объекта с иерархической файловой системой. Этот курс научит вас создавать и управлять надежным хранилищем данных, которое поддерживает самые сложные рабочие нагрузки больших данных. Вы пройдете путь от понимания основных концепций хранения до реализации сложных жизненных циклов данных. К концу этого курса вы сможете создать безопасное озеро данных, интегрировать его с мощными движками обработки и оптимизировать его для повышения производительности и экономической эффективности. Что вы узнаете: - Понять основную архитектуру хранилища Data Lake и его роль в современных облачных экосистемах. - Ввод структурированных и неструктурированных данных из различных источников с использованием стандартных для отрасли моделей интеграции. - Обрабатывать крупномасштабные наборы данных с использованием рабочих процессов на основе Spark на Databricks и HDInsight. - Настройка многоуровневой безопасности, включая управление идентификацией, брандмауэры и детализированные списки управления доступом. - Внедрение моделей " Дельта-Лейк &quot, с тем чтобы обеспечить надежность и согласованность данных и операций ACID. - Применять политики управления жизненным циклом для автоматизации хранения данных и оптимизации затрат на хранение. - Мониторинг работоспособности системы и применение методов настройки производительности для рабочих нагрузок на уровне предприятия. Курс начинается с основной терминологии и основных принципов хранения, а затем переходит к практическому перемещению данных, логике обработки и расширенным конфигурациям безопасности. Вы прочитываете подробные объяснения и практические примеры, предназначенные для повышения технической уверенности. Этот курс предназначен для начинающих и начинающих инженеров данных, которые хотят понять облачное хранение больших данных. Для начала не требуется предыдущий опыт работы с Azure. Начните изучать современную архитектуру облачных данных уже сегодня.