Перенесена в архив: Data Engineer
Отправить резюме
О вакансии
Маркетинговая SaaS-платформа, которая посредством различных модулей позволяет управлять жизненным циклом клиента, в поиске Data Engineer.
Платформа позволяет привлекать новых клиентов, увеличивать конверсию текущих посетителей в полезные действия, работать с лояльностью покупателей и другими целями на любом этапе воронки продаж через мотивирующий персонализированный покупательский опыт на основе анализа Big Data.
Клиентами сервиса являются крупнейшие площадки, среди которых ведущие E-commerce проекты, банки, медиа, транспортные компании — всего уже более 800 клиентов.
Задачи:
- Проектирование и реализация аналитического хранилища для нужд BI и data science.
- Проектирование и реализация ETL-процессов в гетерогенном хранилище: MPP-базы, традиционные RDBMS, Kafka, NoSQL-базы, распределенные файловые системы.
- Выстраивание автоматизированных процессов обеспечения и контроля качества данных на всем пути поставки до аналитических систем и операционных сервисов.
- Оптимизация производительности ETL-процессов и вычислений в аналитических системах.
Понадобится:
- Работа хотя бы с одним из open-source планировщиков: Apache Oozie, Apache Airflow, Luigi, Azkaban и т.п.
- Владение SQL на уровне написания запросов с агрегацией, вложенностью и разными видами join-ов.
- Базовое понимание внутреннего устройства реляционных баз данных и MPP-систем (Vertica, Greenplum, Presto и т.п.).
- Знание или готовность изучить Python.
- Опыт работы с Hadoop (прежде всего YARN и HDFS).
- Опыт работы с Apache Spark.
- Опыт работы с Kafka.
Будет плюсом:
- Знание Clojure.
- Опыт работы с AWS / GCE / Azure.
- Опыт работы с Docker.
- Опыт работы с системами оркестрации контейнеров: Kubernetes, Rancher, Docker Swarm и т.п.
Условия:
- Технически сильная команда и то, что называется "атмосферой стартапа".
- Продукт с огромной аудиторией.
- Комфортный офис в центре и гибкий график.
- Конкурентная зарплата и ДМС после испытательного срока.
Присылайте резюме на hr@digitalhr.ru
