Data engineer

Задачи

• Обрабатывать данные парсинга и создавать стабильные пайплайны с хорошей очисткой данных и контролем качества
• Интегрироваться с API маркетплейсов и создавать витрины на основе данных площадок и парсинга
• Создавать batch и streaming pipeline обработки данных
• Разруливать зависимости потоков данных
• Оптимизировать SQL-запросы
• Тестировать и мониторить качество данных

Ожидания

• Отличное знание SQL
• Знание Python на уровне сеньор-разработчика
• Хотя бы одно из, лучше все: athena/presto, spark, clickhouse, Trino
• Опыт работы с большими массивами данных

Будет плюсом:

• Опыт решения аналитических задач
• Работа с luigi/airflow
• Опыт работы с облачным стеком
• Опыт работы с hadoop стеком

С кем работать

Непосредственным руководителем будет Павел Тарасов — сооснователь Анабара. До этого Павел создал и возглавлял департамент Machine Learning в Циане, поэтому ты будешь в хорошей компании и сможешь многому научиться.

Подробнее о наших технологиях — высупление Павла на DataOps Community Meetup

Условия работы

• Конкурентоспособная официальная зарплата
• Удаленная работа по московскому времени. Гибкое начало дня — до 11:00
• Участие в превращении старт-апа в большую компанию
• Погружение в быстрорастущую индустрию e-commerce
• Много новых и нестандартных задач помогут быстро прокачать навыки

Откликнуться

Пришлите резюме и сопроводительное письмо на почту o.meshkova@anabar.ai