Вакансия “Data engineer Java, Хранение и обработка данных“
|
Описание вакансии:
|
|
| Рабочее место: |
•
Стационарное рабочее место
|
| Адрес места работы: |
•
Москва, Пресненская набережная 10
|
| Тип занятости: |
•
Постоянная работа
|
| График работы: |
•
полный день
|
| Опыт работы: | • Более 6 лет |
| Требования: |
•
Java
•
Hadoop
•
ClickHouse
•
Gitlab
•
Kafka
•
Хранение и обработка данных
•
IT
|
| Дополнительно: |
•
Направление занимается разработкой платформы хранилища данных и средств визуализации. В направлении более 100 профессионалов, каждый из которых занимается своей задачей: техническим анализом процессов, данных и интеграций; транспортом данных; построением хранилища; развитием средств визуализации данных и поддержкой хранилища. Мы собираем команду, которая предана своему делу, любит большие интересные задачи и готова пройти уникальный путь построение одного из самых больших хранилищ данных в России. Команда создает решение для автоматической доставки данных и построения горячей аналитики. Задача сделать так, что бы внутренние пользователи смогли сами найти исходные данные, доставить их до нужной системы и проанализировать. Мы в начале пути и нам предстоит еще много интересных и сложных задач.
Наш стек: Java
Vertica, ClickHouse, Hadoop (hаdоор3, hdfs, yarn, hive) и др.
Gitlab CI/CD, Kubernetes
Kafka, Prometheus, Grafana
Gitlab, GIT
Вам предстоит: Работа в команде над созданием новых и развитием существующих инструментов на базе Hadoop (hаdоор3, hdfs, yarn, hive).
Внедрение/рефакторинг е2е тестирования сервисов.
Участие в проектировании архитектуры разрабатываемых решений.
Участие в выборе используемых технологий и компонентов.
Внедрение и сопровождение технических решений.
Документирование разрабатываемых решений.
Проведение code review.
Мы ожидаем: Уверенное владение Java.
Опыт работы с Hadoop (hdfs, yarn, hive).
Опыт разработки многопоточных приложений.
Опыт работы с СУБД (Postgre SQL/MS SQL).
Опыт работы с аналитическими БД (Vertica/Greenplum/BigQuery/Redshift/Synapse).
Опыт работы с Kubernetes, Kafka, git.
Опыт работы с KV-хранилищами.
Будет плюсом: Опыт работы с Prometheus, Grafana.
Опыт работы со Scala.
Опыт работы с Airflow (Celery Executor, k8s).
Мы предлагаем: Динамичный и быстроразвивающийся бизнес, ресурсы, возможность вместе сделать лучший продукт на рынке e-commerce.
Свободу действий в принятии решений.
Достойный уровень заработной платы.
Профессиональную команду, которой мы гордимся.
Возможность развиваться вместе с нашим бизнесом. |