Skip to content

Update readme.md #161

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Open
wants to merge 2 commits into
base: master
Choose a base branch
from
Open

Update readme.md #161

Show file tree
Hide file tree
Changes from all commits
Commits
Show all changes
2 commits
Select commit Hold shift + click to select a range
9d83d56
Update readme.md
Impaler67 Oct 15, 2024
2ea2cf0
Update readme.md
Impaler67 Oct 15, 2024
File filter

Filter by extension

Filter by extension
Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
22 changes: 11 additions & 11 deletions DE-101 Modules/Module01/readme.md
View file
Open in desktop
Original file line number Diff line number Diff line change
Expand Up @@ -8,7 +8,7 @@

Данный модуль направлен на получение теоретической базы знаний для дальнейшей работы с курсом, а также на понимание роли аналитики и дата инженера в организации. Прежде чем научиться работать с инструментами очень важно понять принцип работы бизнеса, как бизнес использует данные, и как они могут быть полезны. Будут рассмотрены типовые архитектурные решения и вакансии на роль дата инженера.

**Видео лекция** - [Модуль 1.1 Введение](https://youtu.be/UjvN8IE77Cs)
**Видео лекция** - [Модуль 1.1 Введение](https://youtu.be/UjvN8IE77Cs) ([ссылка на Rutube](https://rutube.ru/video/5cd3bcd200b68f2e53404f1a282d894c/))

## 1.2: Роль аналитики в организации

Expand All @@ -27,7 +27,7 @@

Для того чтобы бизнес рос нужно создавать больше ценностей для каждой из групп. Для клиентов, например, клиентский опыт (customer experience). Для сотрудников - уровень баланса между работой и жизнью, зарплата (work life balance, salary). Для владельцев - доход (income). Для успешного роста бизнеса и выполнения своей работы все эти группы принимают решения (decision making). Для того чтобы принимать решения нужны данные (data). Данные могут быть в необработанном виде (raw data), а могут быть в виде информации (organized raw data). Одной из задач инженера данных является предоставление данных группам, которые были описаны выше для принятия дальнейших решений. Поэтому очень важно понимать, как именно работа проделанная дата инженером влияет на то, что происходит с бизнесом.

**Видео лекция** - [Модуль 1.2 Роль Аналитики в Организации](https://youtu.be/DpXQSsKhWcs)
**Видео лекция** - [Модуль 1.2 Роль Аналитики в Организации](https://youtu.be/DpXQSsKhWcs) ([ссылка на Rutube](https://rutube.ru/video/bf494c1ed7ac6cfe2f0936141c76c1cc/))

## 1.3: Задачи аналитики

Expand All @@ -39,7 +39,7 @@
4. Соблюдение требований
5. Избежание рисков

**Видео лекция** - [Модуль 1.3 Роль Аналитики в Организации](https://youtu.be/80zFSlm9w0w)
**Видео лекция** - [Модуль 1.3 Для чего нужна аналитика](https://youtu.be/80zFSlm9w0w) ([ссылка на Rutube](https://rutube.ru/video/aeae96f3551bfde17b58dbc405e27043/))

## 1.4: MindMap инжиниринга данных

Expand All @@ -58,7 +58,7 @@ MindMap - интеллектуальная карта, инструмент ви
9. Big Data;
10. Spark - быстрая и универсальная платформа для обработки данных

**Видео лекция** - [Модуль 1.4 MindMap Инженера Данных](https://youtu.be/tqs8Vn8bSMs)
**Видео лекция** - [Модуль 1.4 MindMap Инженера Данных](https://youtu.be/tqs8Vn8bSMs) ([ссылка на Rutube](https://rutube.ru/video/bfb07a85490785c02258df351b0d20dd/))

## 1.5: Основные роли в аналитике

Expand Down Expand Up @@ -89,9 +89,9 @@ MindMap - интеллектуальная карта, инструмент ви

Курс практически полностью покрывает традиционную категорию и категорию инженера данных.

**Видео лекция** - [Модуль 1.5 Основные роли и профессии для работы с данными](https://youtu.be/5OkCvQOF3Wg)
**Видео лекция** - [Модуль 1.5 Основные роли и профессии для работы с данными](https://youtu.be/5OkCvQOF3Wg) ([ссылка на Rutube](https://rutube.ru/video/c980d80591362c2421423fb7e1afcd8b/))

**Запись вебинара с экспертом** - [ДАТА КОМАНДА: ЦЕЛИ, СТРУКТУРА И УПРАВЛЕНИЕ / ВЛАДИМИР ЛАГУТИНСКИЙ](https://youtu.be/NLOq7GC7zA8)
**Запись вебинара с экспертом** - [ДАТА КОМАНДА: ЦЕЛИ, СТРУКТУРА И УПРАВЛЕНИЕ / ВЛАДИМИР ЛАГУТИНСКИЙ](https://youtu.be/NLOq7GC7zA8) ([ссылка на Rutube](https://rutube.ru/video/2df51268244f1a657d751a2e495b3a44/))

## 1.6: Два типа инженера данных
Мне очень нравится слово ИНЖЕНЕР. Я сам по специальности Инженер-конструктор. Для меня инженер - это профессионал, который может посмотреть на предмет и мысленно его разобрать на составные части, найти неисправность в неработающем предмете или создать новый предмет на базе требований заказчика, используя свои профессиональные инструменты.
Expand Down Expand Up @@ -130,7 +130,7 @@ MindMap - интеллектуальная карта, инструмент ви

**Главное в этом курсе не зубрежка программирования или конкретного продукта, а понимание принципов работы с данными, классов инструментов и возможных бизнес-задач и пути их решения, а для всего остального есть Google;)**

**Видео лекция** - [Модуль 1.6 Два типа инженера данных](https://youtu.be/Ei21wxKKCMI)
**Видео лекция** - [Модуль 1.6 Два типа инженера данных](https://youtu.be/Ei21wxKKCMI) ([ссылка на Rutube](https://rutube.ru/video/d58f634e2f1bd77a6725d56d838eb77b/))

## 1.7: Архитектура аналитического решения

Expand All @@ -145,7 +145,7 @@ MindMap - интеллектуальная карта, инструмент ви

Иногда используется ещё один слой - Processing/Compute Layer, где происходит трансформация данных перед загрузкой в хранилище.

**Видео лекция** - [Модуль 1.7 Архитектура Аналитического Решения](https://youtu.be/_M8yxr2Inyo)
**Видео лекция** - [Модуль 1.7 Архитектура Аналитического Решения](https://youtu.be/_M8yxr2Inyo) ([ссылка на Rutube](https://rutube.ru/video/fe88e24caaf18192adb999b76ac832d3/))

## 1.8: Обзор вакансий Amazon и HH.ru

Expand All @@ -161,15 +161,15 @@ MindMap - интеллектуальная карта, инструмент ви

В видео мы рассмотрели примеры вакансий Data Engineer, BI Engineer, ETL разработчик, BI Разработчик, Аналитик. Так же я показал на что я обращаю внимания и как можно определить тип решения, которое используется в компании.

**Видео лекция** - [Модуль 1.8 Обзор вакансий](https://youtu.be/A18WOwkInoQ)
**Видео лекция** - [Модуль 1.8 Обзор вакансий](https://youtu.be/A18WOwkInoQ) ([ссылка на Rutube](https://rutube.ru/video/b82c2dba7f454e640148db8c2b45314a/))

## 1.9: Аналитика в Excel

Это лекция для людей, кто с excel "на вы". Мы рассмотрим примеры таблиц и основные операции, которым можно выполнять в Excel. Чтобы успешно освоить профессию связанную с аналитикой, нужно освоить Excel, так как там используются те же принципы работы с данными.

Эта лекция не обязательная.

**Видео лекция** - [Модуль 1.9 Аналитика в Excel](https://youtu.be/3ncC-l-nkOo)
**Видео лекция** - [Модуль 1.9 Аналитика в Excel](https://youtu.be/3ncC-l-nkOo) ([ссылка на Rutube](https://rutube.ru/video/cc0c98a32b9169331614dadbbd32c5d2/))

## Домашнее задание
В качестве домашнего задания нужно установить `git`, создать аккаунт на `GitHub`, нарисовать архитектуру решения в `draw.io` и построить дашборд на базе файлика, который нужно синхронизировать со своим локальным компьютером, используя `git`.
Expand All @@ -178,7 +178,7 @@ MindMap - интеллектуальная карта, инструмент ви

Задание по лабораторной работе - [Домашнее задание для модуля 1](https://github.com/Data-Learn/data-engineering/tree/master/DE-101%20Modules/Module01/DE%20-%20101%20Lab%201.1).

Если **вы не знаете как оформлять задание**, то вот [видео как сохранять домашнее задание в гит](https://youtu.be/USDNzpTMNSs) и создать GitHub аккаунт. **Это очень важный навык!**
Если **вы не знаете как оформлять задание**, то вот [видео как сохранять домашнее задание в гит](https://youtu.be/USDNzpTMNSs) ([ссылка на Rutube](https://rutube.ru/video/26b10250008933790c3ce555a4162a47/)) и создать GitHub аккаунт. **Это очень важный навык!**

# Опрос Модуль 1
Пожалуйста пройдите [опрос по завершению Модуля 1](https://forms.gle/PBHpWA2g2cNpEXax9). Так я смогу посмотреть, сколько человек закончило модуль, что было хорошо, а что можно улучшить.
Expand Down
4 changes: 2 additions & 2 deletions readme.md
View file
Open in desktop
Original file line number Diff line number Diff line change
Expand Up @@ -54,8 +54,8 @@ Data Learn - это открытый ресурс, главная задача

## Начало обучения - Введение в Аналитику и Инжиниринг Данных (DE-101)
Вы можете ознакомится с вводными видео лекциями. Это самые первые видео Data Learn:
1. [Вводная информация Data Learn v2](https://youtu.be/n2TMLxPqQIY) (Если вдруг хотите посмотреть v1 и посмеяться, то вот [oна](https://youtu.be/M1zB5XiOLiI)).
2. [Что будет на курсах Data Learn](https://youtu.be/LHajrS_WaRA). (это тоже старое видео, но вдруг вам интерсно).
1. [Вводная информация Data Learn v2](https://youtu.be/n2TMLxPqQIY). ([ссылка на Rutube](https://rutube.ru/video/89b5036c29b2188a0ead426977d584cd/)) (Если вдруг хотите посмотреть v1 и посмеяться, то вот [oна](https://youtu.be/M1zB5XiOLiI) ([ссылка на Rutube](https://rutube.ru/video/7fdd1e7906dc4a43d05189b98b239e80/))).
2. [Что будет на курсах Data Learn](https://youtu.be/LHajrS_WaRA). ([ссылка на Rutube](https://rutube.ru/video/6f3ad5a3bb87fbbcfe4c0930728b749e/)) (это тоже старое видео, но вдруг вам интерсно).

А потом переходите в наш учебник [DE-101](https://github.com/Data-Learn/data-engineering/blob/master/DE%20-%20101%20Guide.md). В нем вы найдете необходимую информацию и ссылки на главы учебника.

Expand Down