Senior Python Developer (Airflow)

Чем предстоит заниматься:

Arenadata ищет сильного и самостоятельного Python-разработчика уровня Senior, который хочет развиваться в open source и вносить вклад в развитие экосистемы Apache Airflow. Эта роль подойдёт кандидату как с опытом backend-разработчика, так и с опытом работы с большими данными, который готов решать сложные задачи и расширять функциональные возможности популярных open source инструментов.

Вы будете работать над проектами, которые напрямую повлияют на развитие Apache Airflow и других инструментов обработки данных, а также улучшать их интеграцию с Hadoop и смежными технологиями.

Мы ждём, что вы владеете:

1. Open source и инструментами обработки данных:

   1. Знание и практическое использование Apache Airflow: написание DAGs, разработка провайдеров, настройка и оптимизация.

2. Экосистема Hadoop:

   1. Хорошее понимание Hadoop и его компонентов: HDFS, YARN, MapReduce.

   2. Знание Spark и PySpark.

   3. Опыт работы с распределёнными и/или колоночными СУБД, такими как Greenplum, ClickHouse, PostgreSQL.

3. Навыки Python:

   1. Уверенное владение Python 3.

   2. Опыт работы с основными библиотеками и фреймворками:

      1. Django (3+) или Flask;

      2. Pandas, NumPy, SQLAlchemy, Pydantic, Pytest.

4. Общие навыки:

   1. От 5 лет подтверждённого опыта в коммерческой разработке.

   2. Владение Linux, умение работать с командной строкой.

   3. Опыт работы с Docker (Kubernetes будет плюсом).

   4. Навыки работы с системами контроля версий (Git).

Присоединяйтесь к нашей команде!

отправить резюме

Мы создаем готовые и тиражируемые data-сервисы для различных инфраструктурных решений

Компания Arenadata создаёт системы сбора, хранения и обработки больших данных на базе open source технологий. Мы разрабатываем коннекторы между этими системами, а также развиваем собственный оркестратор, позволяющий быстро устанавливать и настраивать все дата-сервисы на различных типах инфраструктур.

Продукты Arenadata входят в единую платформу данных, которая является фундаментом для реализации различных задач в области работы с данными. Эксперты Arenadata вносят существенный вклад в развитие международных open source проектов.

Arenadata входит в одноименную Группу вместе с компаниями Picodata, Clean Data, DataCatalog и Tera Integro.

Компания аккредитована Минцифры РФ.

Почему стоит выбрать Arenadata

О рабочей среде

Ты выбираешь сам:

Работать на своем оборудовании или на оборудовании компании
Какую ОС, среду разработки и инструменты использовать

О твоём хорошем настроении

Мы радуемся нашим общим победам, а также:

Дарим сотрудникам и их детям подарки в значимые праздники (День защиты детей, День знаний, Новый год)
Отмечаем круглые даты работы сотрудников в компании

О балансе между работой и личной жизнью

Ты сможешь:

Иметь один день в неделю (четверг) только для написания кода No Meeting Day - минимум встреч, максимум кода (для команды разработки продукта)
Выбрать формат работы: дистанционно или в офисе

О развитии компетенций сотрудников

Мы даем возможность:

Выбрать какую профессиональную экспертизу продолжить развивать за счет очного и онлайн обучения
Посещать профильные конференции и митапы
Улучшить уровень твоего английского языка (график занятий подберем индивидуально)
Пройти техническое обучение нашим продуктам в собственном Центре Обучения

О здоровье

Мы компенсируем:

100% стоимости ДМС со стоматологией для всех сотрудников, включая страхование жизни
Больничный лист до уровня месячного дохода, независимо от стажа и срока работы в компании
80% стоимости ДМС для детей
50% стоимости ДМС по программе онкострахования