From 9d83d5648f81b0dc32d993df22ce4a556150b983 Mon Sep 17 00:00:00 2001 From: Impaler67 <116521811+Impaler67@users.noreply.github.com> Date: Tue, 15 Oct 2024 13:39:50 +0500 Subject: [PATCH 1/2] Update readme.md Added Rutube links for available videos --- readme.md | 4 ++-- 1 file changed, 2 insertions(+), 2 deletions(-) diff --git a/readme.md b/readme.md index 48ff30bd..e85f2804 100644 --- a/readme.md +++ b/readme.md @@ -54,8 +54,8 @@ Data Learn - это открытый ресурс, главная задача ## Начало обучения - Введение в Аналитику и Инжиниринг Данных (DE-101) Вы можете ознакомится с вводными видео лекциями. Это самые первые видео Data Learn: -1. [Вводная информация Data Learn v2](https://youtu.be/n2TMLxPqQIY) (Если вдруг хотите посмотреть v1 и посмеяться, то вот [oна](https://youtu.be/M1zB5XiOLiI)). -2. [Что будет на курсах Data Learn](https://youtu.be/LHajrS_WaRA). (это тоже старое видео, но вдруг вам интерсно). +1. [Вводная информация Data Learn v2](https://youtu.be/n2TMLxPqQIY). ([ссылка на Rutube](https://rutube.ru/video/89b5036c29b2188a0ead426977d584cd/)) (Если вдруг хотите посмотреть v1 и посмеяться, то вот [oна](https://youtu.be/M1zB5XiOLiI) ([ссылка на Rutube](https://rutube.ru/video/7fdd1e7906dc4a43d05189b98b239e80/))). +2. [Что будет на курсах Data Learn](https://youtu.be/LHajrS_WaRA). ([ссылка на Rutube](https://rutube.ru/video/6f3ad5a3bb87fbbcfe4c0930728b749e/)) (это тоже старое видео, но вдруг вам интерсно). А потом переходите в наш учебник [DE-101](https://github.com/Data-Learn/data-engineering/blob/master/DE%20-%20101%20Guide.md). В нем вы найдете необходимую информацию и ссылки на главы учебника. From 2ea2cf0e240ef4514ef1e1859a753b85837cf226 Mon Sep 17 00:00:00 2001 From: Impaler67 <116521811+Impaler67@users.noreply.github.com> Date: Tue, 15 Oct 2024 14:37:04 +0500 Subject: [PATCH 2/2] Update readme.md Added Rutube links for the Module01 videos --- DE-101 Modules/Module01/readme.md | 22 +++++++++++----------- 1 file changed, 11 insertions(+), 11 deletions(-) diff --git a/DE-101 Modules/Module01/readme.md b/DE-101 Modules/Module01/readme.md index 01838032..7b458b0d 100644 --- a/DE-101 Modules/Module01/readme.md +++ b/DE-101 Modules/Module01/readme.md @@ -8,7 +8,7 @@ Данный модуль направлен на получение теоретической базы знаний для дальнейшей работы с курсом, а также на понимание роли аналитики и дата инженера в организации. Прежде чем научиться работать с инструментами очень важно понять принцип работы бизнеса, как бизнес использует данные, и как они могут быть полезны. Будут рассмотрены типовые архитектурные решения и вакансии на роль дата инженера. -**Видео лекция** - [Модуль 1.1 Введение](https://youtu.be/UjvN8IE77Cs) +**Видео лекция** - [Модуль 1.1 Введение](https://youtu.be/UjvN8IE77Cs) ([ссылка на Rutube](https://rutube.ru/video/5cd3bcd200b68f2e53404f1a282d894c/)) ## 1.2: Роль аналитики в организации @@ -27,7 +27,7 @@ Для того чтобы бизнес рос нужно создавать больше ценностей для каждой из групп. Для клиентов, например, клиентский опыт (customer experience). Для сотрудников - уровень баланса между работой и жизнью, зарплата (work life balance, salary). Для владельцев - доход (income). Для успешного роста бизнеса и выполнения своей работы все эти группы принимают решения (decision making). Для того чтобы принимать решения нужны данные (data). Данные могут быть в необработанном виде (raw data), а могут быть в виде информации (organized raw data). Одной из задач инженера данных является предоставление данных группам, которые были описаны выше для принятия дальнейших решений. Поэтому очень важно понимать, как именно работа проделанная дата инженером влияет на то, что происходит с бизнесом. -**Видео лекция** - [Модуль 1.2 Роль Аналитики в Организации](https://youtu.be/DpXQSsKhWcs) +**Видео лекция** - [Модуль 1.2 Роль Аналитики в Организации](https://youtu.be/DpXQSsKhWcs) ([ссылка на Rutube](https://rutube.ru/video/bf494c1ed7ac6cfe2f0936141c76c1cc/)) ## 1.3: Задачи аналитики @@ -39,7 +39,7 @@ 4. Соблюдение требований 5. Избежание рисков -**Видео лекция** - [Модуль 1.3 Роль Аналитики в Организации](https://youtu.be/80zFSlm9w0w) +**Видео лекция** - [Модуль 1.3 Для чего нужна аналитика](https://youtu.be/80zFSlm9w0w) ([ссылка на Rutube](https://rutube.ru/video/aeae96f3551bfde17b58dbc405e27043/)) ## 1.4: MindMap инжиниринга данных @@ -58,7 +58,7 @@ MindMap - интеллектуальная карта, инструмент ви 9. Big Data; 10. Spark - быстрая и универсальная платформа для обработки данных -**Видео лекция** - [Модуль 1.4 MindMap Инженера Данных](https://youtu.be/tqs8Vn8bSMs) +**Видео лекция** - [Модуль 1.4 MindMap Инженера Данных](https://youtu.be/tqs8Vn8bSMs) ([ссылка на Rutube](https://rutube.ru/video/bfb07a85490785c02258df351b0d20dd/)) ## 1.5: Основные роли в аналитике @@ -89,9 +89,9 @@ MindMap - интеллектуальная карта, инструмент ви Курс практически полностью покрывает традиционную категорию и категорию инженера данных. -**Видео лекция** - [Модуль 1.5 Основные роли и профессии для работы с данными](https://youtu.be/5OkCvQOF3Wg) +**Видео лекция** - [Модуль 1.5 Основные роли и профессии для работы с данными](https://youtu.be/5OkCvQOF3Wg) ([ссылка на Rutube](https://rutube.ru/video/c980d80591362c2421423fb7e1afcd8b/)) -**Запись вебинара с экспертом** - [ДАТА КОМАНДА: ЦЕЛИ, СТРУКТУРА И УПРАВЛЕНИЕ / ВЛАДИМИР ЛАГУТИНСКИЙ](https://youtu.be/NLOq7GC7zA8) +**Запись вебинара с экспертом** - [ДАТА КОМАНДА: ЦЕЛИ, СТРУКТУРА И УПРАВЛЕНИЕ / ВЛАДИМИР ЛАГУТИНСКИЙ](https://youtu.be/NLOq7GC7zA8) ([ссылка на Rutube](https://rutube.ru/video/2df51268244f1a657d751a2e495b3a44/)) ## 1.6: Два типа инженера данных Мне очень нравится слово ИНЖЕНЕР. Я сам по специальности Инженер-конструктор. Для меня инженер - это профессионал, который может посмотреть на предмет и мысленно его разобрать на составные части, найти неисправность в неработающем предмете или создать новый предмет на базе требований заказчика, используя свои профессиональные инструменты. @@ -130,7 +130,7 @@ MindMap - интеллектуальная карта, инструмент ви **Главное в этом курсе не зубрежка программирования или конкретного продукта, а понимание принципов работы с данными, классов инструментов и возможных бизнес-задач и пути их решения, а для всего остального есть Google;)** -**Видео лекция** - [Модуль 1.6 Два типа инженера данных](https://youtu.be/Ei21wxKKCMI) +**Видео лекция** - [Модуль 1.6 Два типа инженера данных](https://youtu.be/Ei21wxKKCMI) ([ссылка на Rutube](https://rutube.ru/video/d58f634e2f1bd77a6725d56d838eb77b/)) ## 1.7: Архитектура аналитического решения @@ -145,7 +145,7 @@ MindMap - интеллектуальная карта, инструмент ви Иногда используется ещё один слой - Processing/Compute Layer, где происходит трансформация данных перед загрузкой в хранилище. -**Видео лекция** - [Модуль 1.7 Архитектура Аналитического Решения](https://youtu.be/_M8yxr2Inyo) +**Видео лекция** - [Модуль 1.7 Архитектура Аналитического Решения](https://youtu.be/_M8yxr2Inyo) ([ссылка на Rutube](https://rutube.ru/video/fe88e24caaf18192adb999b76ac832d3/)) ## 1.8: Обзор вакансий Amazon и HH.ru @@ -161,7 +161,7 @@ MindMap - интеллектуальная карта, инструмент ви В видео мы рассмотрели примеры вакансий Data Engineer, BI Engineer, ETL разработчик, BI Разработчик, Аналитик. Так же я показал на что я обращаю внимания и как можно определить тип решения, которое используется в компании. -**Видео лекция** - [Модуль 1.8 Обзор вакансий](https://youtu.be/A18WOwkInoQ) +**Видео лекция** - [Модуль 1.8 Обзор вакансий](https://youtu.be/A18WOwkInoQ) ([ссылка на Rutube](https://rutube.ru/video/b82c2dba7f454e640148db8c2b45314a/)) ## 1.9: Аналитика в Excel @@ -169,7 +169,7 @@ MindMap - интеллектуальная карта, инструмент ви Эта лекция не обязательная. -**Видео лекция** - [Модуль 1.9 Аналитика в Excel](https://youtu.be/3ncC-l-nkOo) +**Видео лекция** - [Модуль 1.9 Аналитика в Excel](https://youtu.be/3ncC-l-nkOo) ([ссылка на Rutube](https://rutube.ru/video/cc0c98a32b9169331614dadbbd32c5d2/)) ## Домашнее задание В качестве домашнего задания нужно установить `git`, создать аккаунт на `GitHub`, нарисовать архитектуру решения в `draw.io` и построить дашборд на базе файлика, который нужно синхронизировать со своим локальным компьютером, используя `git`. @@ -178,7 +178,7 @@ MindMap - интеллектуальная карта, инструмент ви Задание по лабораторной работе - [Домашнее задание для модуля 1](https://github.com/Data-Learn/data-engineering/tree/master/DE-101%20Modules/Module01/DE%20-%20101%20Lab%201.1). -Если **вы не знаете как оформлять задание**, то вот [видео как сохранять домашнее задание в гит](https://youtu.be/USDNzpTMNSs) и создать GitHub аккаунт. **Это очень важный навык!** +Если **вы не знаете как оформлять задание**, то вот [видео как сохранять домашнее задание в гит](https://youtu.be/USDNzpTMNSs) ([ссылка на Rutube](https://rutube.ru/video/26b10250008933790c3ce555a4162a47/)) и создать GitHub аккаунт. **Это очень важный навык!** # Опрос Модуль 1 Пожалуйста пройдите [опрос по завершению Модуля 1](https://forms.gle/PBHpWA2g2cNpEXax9). Так я смогу посмотреть, сколько человек закончило модуль, что было хорошо, а что можно улучшить.