Middle Data Engineer
Remote
Overview
Один проєкт, один тип задач роками – знайома ситуація для багатьох Data Engineers.
Тут усе інакше: різні джерела даних, масштабовані пайплайни, великі масиви даних, GCP та нетривіальні задачі для продукту з 10+ млн користувачів.
Main Responsibilities
Про масштаб наших сервісів:
• 50+ млн запитів щодня проходять через наші системи
• 10+ млн активних користувачів покладаються на наші рішення
Ми будуємо не просто продукт — ми створюємо технологічну інфраструктуру, яка об’єднує людей, бізнеси та можливості вже майже по цілому світу.
Що робитимеш як Middle Data Engineer:
- створення та підтримка масштабованих та надійних конвеєрів даних для прийому даних з різних джерел (внутрішні системи, APls, зовнішні платформи);
- робота зі структурованими, напівструктурованими даними, забезпечуючи якість, узгодженість та цілісність даних;
- розробка та підтримка процесів ETL/ELT;
- обробка великих масивів даних в Spark (Data Lake);
- оптимізація PySpark пайплайнів;
- робота з структурами даних JSON, Parquet;
- створення вітрин даних в BigQuery;
- робота з Postgres та MSSQL.
Mandatory Requirements
Must-have:
- 3+ років досвіду в сфері Data Engineering;
- професійний досвід роботи з Python, PySpark,;
- досвід роботи з SQL (MS, Postgres, BigQuery) ;
- досвід побудови пайплайнів міграції даних (ETL) ;
- досвід роботи з Apache Airflow;
- досвід роботи з форматами JSON, Parquet.
- навички роботи з GCP сервісами: (PubSub, Dataproc, Composer, CloudStorage);
Nice-to-have:
- досвід роботи з Tableau або іншими BI інструментами
We offer
Технологічно:
- Високонавантажені системи з реальними викликами масштабування
- Сучасний стек та свобода технологічних рішень
- Можливість впливати на архітектуру продуктів, якими користуються мільйони
Професійно:
- Менторство від сеньйорів з досвідом enterprise-рішень
- Разом будуємо інновації, що працюють для мільйонів
Ідейно:
- Продукт, що змінює країну — не просто ще один стартап
- Тут команди стають драйверами технологічних змін
Benefits:
- Компенсація додаткових витрат, пов’язаних з робочими завданнями, здійснюються до внутрішніх політик компаній.
- Добровільне медичне страхування та страхування життя.
- Корпоративні знижки від партнерів
- Підтримка ментального здоров’я. Можливість безоплатних консультацій з корпоративним психологом.
- Соціальна відповідальність та волонтерський рух «Свої для своїх».
- Клуби за інтересами: біговий, шаховий та інші ініціативи для натхнення.
- Соціальні відпустки та компенсації відповідно до КЗпП України.