- Регистрация
- 22 Февраль 2018
- Сообщения
- 11.084
Автор: Udemy
Название: Snowflake cloud database with ETL(Airflow+Python+Talend) (2021)
Описание:
В нашем предыдущем курсе Snowflake Masterclass [демонстрации в реальном времени + лучшие практики + лабораторные работы] мы глубоко погрузились и поняли основы снежинки, решили множество заданий и поняли лучшие практики для загрузки и выгрузки данных.
Кроме того, мы внимательно изучили большинство особенностей снежинки, понимая, как они работают под капотом. Благодаря этим обсуждениям вы узнали, как эффективно использовать Snowflake .
Не хватало одной части: как создавать и управлять рабочими процессами ETL в Snowflake. Этот курс как раз об этом.
В этом курсе мы узнаем:
- Создавайте рабочие процессы в Airflow .
- Мы будем использовать возможности Talend для создания универсального кода для приема и обработки данных в Snowflake.
- Мы построим таблицы аудита и будем записывать каждую команду, которую запускаем на снежинке. Мы будем записывать время, затраченное на выполнение каждой задачи, и фиксировать кредиты в виде снежинок.
- После того, как мы построим структуру, мы создадим рабочий процесс для обработки и преобразования объема данных о трафике Нью-Йорка объемом более 250 ГБ.
- Наконец, мы свяжем Snowflake с python и напишем код для сбора статистики данных, которые мы загрузили в снежинку.
- вы также получите доступ к предварительно настроенному блокноту Jupyter для запуска кода Python на Snowflake .
Если вы ранее не работали с Talend, Airflow и Python, не волнуйтесь, это очень простые инструменты, я предоставлю необходимое введение.
Я уверен, что вы многому научитесь из этого путешествия. Увидимся на курсе !!
Для кого этот курс:
- Разработчикам интересно узнать, как строить рабочие процессы для снежинки.
Требования
- В этом курсе будет использоваться программное обеспечение виртуальной коробки.
- Для работы виртуальной машины требуется ~ 30 Гб дискового пространства.
Материал на английском языке
Подробнее:
Скачать:
Название: Snowflake cloud database with ETL(Airflow+Python+Talend) (2021)
Описание:
В нашем предыдущем курсе Snowflake Masterclass [демонстрации в реальном времени + лучшие практики + лабораторные работы] мы глубоко погрузились и поняли основы снежинки, решили множество заданий и поняли лучшие практики для загрузки и выгрузки данных.
Кроме того, мы внимательно изучили большинство особенностей снежинки, понимая, как они работают под капотом. Благодаря этим обсуждениям вы узнали, как эффективно использовать Snowflake .
Не хватало одной части: как создавать и управлять рабочими процессами ETL в Snowflake. Этот курс как раз об этом.
В этом курсе мы узнаем:
- Создавайте рабочие процессы в Airflow .
- Мы будем использовать возможности Talend для создания универсального кода для приема и обработки данных в Snowflake.
- Мы построим таблицы аудита и будем записывать каждую команду, которую запускаем на снежинке. Мы будем записывать время, затраченное на выполнение каждой задачи, и фиксировать кредиты в виде снежинок.
- После того, как мы построим структуру, мы создадим рабочий процесс для обработки и преобразования объема данных о трафике Нью-Йорка объемом более 250 ГБ.
- Наконец, мы свяжем Snowflake с python и напишем код для сбора статистики данных, которые мы загрузили в снежинку.
- вы также получите доступ к предварительно настроенному блокноту Jupyter для запуска кода Python на Snowflake .
Если вы ранее не работали с Talend, Airflow и Python, не волнуйтесь, это очень простые инструменты, я предоставлю необходимое введение.
Я уверен, что вы многому научитесь из этого путешествия. Увидимся на курсе !!
Для кого этот курс:
- Разработчикам интересно узнать, как строить рабочие процессы для снежинки.
Требования
- В этом курсе будет использоваться программное обеспечение виртуальной коробки.
- Для работы виртуальной машины требуется ~ 30 Гб дискового пространства.
Материал на английском языке
Подробнее:
Для просмотра содержимого вам необходимо авторизоваться.
Скачать:
Скрытое содержимое могут видеть только члены группы Премиум.
Скрытый контент для пользователей All-dar.