Перенесена в архив: Senior Data engineer
О вакансии
Компания усиливает новый отдел аналитики, чтобы обеспечить всех коллег доступными и понятными отчетами, сформулировать для них важные метрики и помогать принимать бизнес и продуктовые решения.
Что нужно делать:
- Строить DWH и ETL:
— собирать требования от аналитиков и data science, на основании требований выстраивать DWH и ETL-архитектуру;
— взаимодействовать с командой Back-end и Front-end, в части extract ETL-процесса;
— наладить мониторинг работоспособности системы, чинить, когда что-то сломалось;
— в идеальном мире, взять на себя вопросы сбора клиентской аналитики, но это часть обсуждаема;
— в случае, если вы захотите менять стек, на котором работает команда - поддерживать систему.
- Получать новые данные:
— писать интеграции с API внешних систем, собирать данные из них у себя в DWH.
- Поддерживать инженерную культуру в команде:
— наладить CI-систему;
— писать тесты;
— проводить ревью кода команды.
Текущий стек:
- Основной DWH Amazon Redshift, 2 ноды.
- Data Lake Amazon s3 + Athena.
- Оркестрация ETL Amazon Data Pipelines.
- Клиентская аналитика Amazon Mobile Tracker, для приложений и веба (теперь часть сервиса Amazon Pinpoint).
- Legacy визуализация данных Redash.
- Основная визуализация данных Tableau.
- Хранилища Back-end: MariaDB, MongoDB, Redis, Kafka.
- Для работы с кодом используется Git (Github).
Что требуется от вас:
- Очень хороший уровень SQL, на уровне DBA.
- Хороший уровень Python.
- Умение объяснять сложные вещи простым языком.
- Умение и готовность постоянно учиться новому. Команда каждый день решает задачи, которые пока не умеет решать, разбирается в запутанных схемах данных, вникает в незнакомые предметные области и не боится неопределенности.
- Английский язык на уровне чтения stackoverflow и документации.
- Умение планировать свое время и декомпозировать задачи.
Будет большим преимуществом:
- Опыт работы с облачной инфраструктурой.
- Понимание работы web и мобильных приложений.
- Знание Google Tag Manager и опыт работы с ним.
- Опыт работы с аналитическими инструментами Amazon: Redshift, Pinpoint, Athena, S3, Data Pipelines.
Этапы интервью:
- Интервью с рекрутером DigitalHR.
- Тестовое задание и общение с командой (порядок на ваш выбор).
- Финальное интервью.
Присылайте резюме на hr@digitalhr.ru