Senior Big Data инженер (Scala, Spark) (to Riga)

Joom — международный мобильный маркетплейс, самый быстрорастущий e-Commerce сервис Европы. Первую версию приложения мы запустили летом 2016-го года, к текущему моменту у нас более 400 миллионов установок по всему миру.

Платформа аналитики Joom создает инфраструктуру и основные big data процессы в компании. У нас 1B+ событий в день, 1PB+ данных, и современный стек (Spark/Kubernetes без Hadoop, AWS, BQ). Кроме Joom Marketplace, у нас запускаются новые проекты, обработка данных для которых только создается.

В роли Senior Data Engineer, вы будете делать интересные крупные задачи — от технического дизайна до поддержки пользователей.

Например за последний год мы:

• создавали и разрабатывали аналитические продукты (детектор аномалий, платформу экспериментов);

• перешли на Spark 3 в Kubernetes;

• создавали ETL инструменты (такие как импорт событий и баз данных);

• внедряли open-source инструменты (Jupyter, PySpark).

• имеете опыт завершения крупных и сложных проектов;

• понимаете принципы обработки больших данных;

• имеете практический опыт с Scala или Java.

• знаете Python;

• работали с Map-Reduce решениями (Apache Spark, Hadoop Map Reduce, YT);

• владеете SQL на среднем или продвинутом уровне;

• работали с аналитическими БД (ClickHouse, Presto, Druid и т.д.);

• знакомы с облачными технологиями (EMR, Kubernetes, Databricks, Docker, Terraform и т.д.);

• знакомы с планировщиками ETL процессов (Oozie, Airflow, Luigi и т.д.).

Мы будем рады кандидатам из смежных областей (backend/DWH/ML), которым интересно стать Data Engineer'ом.

• красивый и удобный офис в районе м. ЦСКА/Динамо;

• релокационный пакет для соискателей не из Москвы;

• возможность релокации в Ригу (Латвия) через 3 месяца;

• белая зарплата;

• пакет акций компании;

• гибкий график;

• любое оборудование для работы на выбор;

• ДМС (в т.ч. для детей) и 100% оплачиваемые больничные;

• ипотечная программа после двух лет работы;

• бесплатная парковка;

• корпоративные обеды.