Arenadata - Корпоративная платформа хранения и обработки больших данных с открытым исходным кодом

Что нужно делать:

Автоматизировать тестирование компонентов Arenadata Hyperwave (ADH) и Arenadata Hyperwave Cloud (ADHC): Spark, Impala, Trino, Kyuubi, Hive, HBase, Ozone, HDFS, YARN, Airflow, Flink;
Тестировать развёртывание и эксплуатацию платформы на bare metal, VM и в Kubernetes;
Разрабатывать и развивать тестовые фреймворки на Python для распределённых Big Data-систем;
Писать интеграционные и e2e-тесты на реальных кластерах: функциональность, отказоустойчивость, производительность;
Поддерживать и развивать CI/CD-пайплайны автотестов;
Работать с разработчиками, архитекторами и QA над качеством релизов;
Делать код-ревью тестового кода.

Наши ожидания

1. Python и проектирование

Коммерческая разработка на Python от 4 лет;
SOLID, DRY, KISS и умение применять их при проектировании тестовых фреймворков;
Паттерны проектирования (Factory, Strategy, Builder, Resource Object) для гибких и масштабируемых решений;
Pytest на экспертном уровне: сложные фикстуры, параметризация, плагины (pytest-xdist и другие).

2. Инфраструктура и Linux

Linux (Core Utils, Bash): файловые системы, права, процессы, сетевые утилиты;
Тестирование систем развёртывания и конфигурации распределённого ПО, плюсом будет Ansible, Terraform или Puppet;
Сетевой бэкграунд: HTTP(S), TCP/IP, SSH, сертификаты.

3. CI/CD

Настройка и поддержка CI/CD-пайплайнов (Jenkins, GitLab CI, TeamCity, GitHub Actions).

4. Kubernetes и cloud-native (будет плюсом)

Docker и Kubernetes на уровне эксплуатации и отладки;
Понимание развёртывания stateful и stateless Big Data-сервисов в Kubernetes;
Тестирование Kubernetes-операторов, работа с kubectl, Helm, kind/minikube.

Будет плюсом:

Опыт работы с дистрибутивами Hadoop (Arenadata, Cloudera CDP/CDH, Hortonworks HDP, MapR);
Практический опыт с Apache Spark, Trino, Impala, Kafka — запросы, джобы, разбор инцидентов;
Аутентификация и авторизация в распределённых системах: Kerberos, LDAP, Ranger, TLS/mTLS.

Присоединяйтесь к нашей команде!

отправить резюме

Мы создаем готовые и тиражируемые data-сервисы для различных инфраструктурных решений

Компания Arenadata создаёт системы сбора, хранения и обработки больших данных на базе open source технологий. Мы разрабатываем коннекторы между этими системами, а также развиваем собственный оркестратор, позволяющий быстро устанавливать и настраивать все дата-сервисы на различных типах инфраструктур.

Продукты Arenadata входят в единую платформу данных, которая является фундаментом для реализации различных задач в области работы с данными. Эксперты Arenadata вносят существенный вклад в развитие международных open source проектов.

Arenadata входит в одноименную Группу вместе с компаниями Picodata, Clean Data, DataCatalog и Tera Integro.

Компания аккредитована Минцифры РФ.

Почему стоит выбрать Arenadata

О рабочей среде

Ты выбираешь сам:

Работать на своем оборудовании или на оборудовании компании
Какую ОС, среду разработки и инструменты использовать

О твоём хорошем настроении

Мы радуемся нашим общим победам, а также:

Дарим сотрудникам и их детям подарки в значимые праздники (День защиты детей, День знаний, Новый год)
Отмечаем круглые даты работы сотрудников в компании

О балансе между работой и личной жизнью

Ты сможешь:

Иметь один день в неделю (четверг) только для написания кода No Meeting Day - минимум встреч, максимум кода (для команды разработки продукта)
Выбрать формат работы: дистанционно или в офисе

О развитии компетенций сотрудников

Мы даем возможность:

Выбрать какую профессиональную экспертизу продолжить развивать за счет очного и онлайн обучения
Посещать профильные конференции и митапы
Пройти техническое обучение нашим продуктам в собственном Центре Обучения

О здоровье

Мы компенсируем:

100% стоимости ДМС со стоматологией для всех сотрудников, включая страхование жизни
Больничный лист до уровня месячного дохода, независимо от стажа и срока работы в компании
50% стоимости ДМС для детей
50% стоимости ДМС по программе онкострахования