left-topright-bottom
E-commerce & Retail
Подбор

Data Engineer Middle 🆔 BD-8211

Middle
Rate

2600 RUB per hour

Number of specialists

1

Schedule

Удалённая работа

Required location

Россия

Citizenship

Россия

Industry

E-commerce & Retail

Customer

RedLab

Mandatory requirements

языки программирования, фрэймворки, системы управления базами данных, и т.д.
Опыт в годах: 3 +
- Общее представление о стеке технологий BigData. 
- Понимать различия работы между BigData и с данными обычного размера.
- Знание SQL (индексы, функции, умение писать не сложные запросы). 
- Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).
- Умение работать с Git (знание команд git pull/commit/push). 
- Опыт работы с любым графическим ETL инструментом (Apache Nifi, Airflow, Talend, Informatica, SAS и т.п.). 
- Представление о работе с Hadoop. 
- Понимание устройства HDFS, форматов данных. 
- Понимание работы с Hive или любого другого хранилища на основе Hadoop. 
- Опыт использования системами ведения проектов и документации. 
- Знания основ программирования (Java, Groovy, Python).

Tasks

- Разработка, реализация и поддержка типовых интеграционных решений, на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow).
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок. 
- Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных. 
- Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.

Description of the project and the team

азработка интеграционных потоков и перенос потоков данных из ТОРГ CAR. Разработка, реализация и поддержка типовых решений, на стеке технологий, принятых в команде.

Header Logo