Vendetta
Администратор
- Регистрация
- 16 Сен 2015
- Сообщения
- 239.686
- Реакции
- 426.072
Data-инженер [2024] [Слёрм] [Николай Марков, Николай Акимов, Ася Гайламазян]
На курсе вы:
Научитесь строить дата-пайплайны и выстраивать эффективную работу дата-архитектуры
Разберетесь в инструментах для управления данными
Выполните реальный проект на собственных данных под руководством опытных экспертов
Какие инструменты освоите?
Python, AirFlow, Bash, NiFi, Hadoop, Kafka, Spark, Neo4j, PostgreSQL, MongoDBl, ClickHouse
Спойлер: Программа
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.5. Реляционные базы данных.
6. NOSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.13. Работа с собственным проектом в финальном модуле.
14. Заключение
На курсе вы:
Научитесь строить дата-пайплайны и выстраивать эффективную работу дата-архитектуры
Разберетесь в инструментах для управления данными
Выполните реальный проект на собственных данных под руководством опытных экспертов
Какие инструменты освоите?
Python, AirFlow, Bash, NiFi, Hadoop, Kafka, Spark, Neo4j, PostgreSQL, MongoDBl, ClickHouse
Спойлер: Программа
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.5. Реляционные базы данных.
6. NOSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.13. Работа с собственным проектом в финальном модуле.
14. Заключение
Для просмотра скрытого содержимого вы должны зарегистрироваться
Возможно, Вас ещё заинтересует:
- Worksheet The Dare (B2/C1) [Елена Сарнавская]
- Закулисье клинических рекомендаций - подводные камни диагностики и лечения тиреотоксикоза [Клиника Калинченко] [Азад Намазов, Александра Намазова]
- Когнитивно-поведенческая терапия: мастерство и эффективность. Модуль 3 [Тариф Слушатель] [Юлия Горячева, Патриция Резик, Эдна Фоа]
- Трафик-Контроль: Перезагрузка [Тариф Самостоятельный] [Сергей Назаров]
- [Вязание] Carta — архитектурный жилет спицами с диагональной текстурой [Вяжи.ру] [issuelyric Tae]
- Мультиварка. Простые и быстрые рецепты [Сборник кулинарных рецептов]
- Тайны детских карт Бацзы (5 октября 2026) [mingli] [Анна Зайцева]
- Гайд «по следам Великолепного века» [Milady Fairy] [Ирина Фея]