Разбор вакансии Data Engineer (команда RecSys)

Кратко

Компания «Okko» ищет Data Engineer для работы в команде, занимающейся системами рекомендаций (RecSys). Основная задача — разработка и поддержка инфраструктуры для обработки и анализа данных, что позволит улучшить качество рекомендаций для пользователей платформы.

Стек

Apache Spark — для обработки больших объемов данных.
Apache Airflow — для автоматизации и управления потоками данных.
ClickHouse — аналитическая база данных для высокопроизводительных запросов.
SQL — для работы с реляционными базами данных.
Python — основной язык программирования для разработки ETL-процессов и написания скриптов.

Кому подойдёт

Вакансия подойдёт специалистам с опытом работы в области обработки данных, которые:
- Имеют опыт работы с большими данными и распределёнными системами.
- Знакомы с инструментами для автоматизации и управления данными.
- Умеют писать эффективные запросы на SQL и имеют опыт работы с аналитическими базами данных.
- Обладают навыками программирования на Python и готовы разрабатывать ETL-процессы.

Зарплатные ожидания

Зарплатные ожидания для данной позиции могут варьироваться в зависимости от уровня опыта и навыков кандидата. В среднем, для Data Engineer в Москве зарплата может составлять от 150,000 до 250,000 рублей в месяц.

Риски

Конкуренция: Вакансия может привлечь множество кандидатов, что увеличивает конкуренцию.
Сложность задач: Работа с большими данными и сложными системами может быть стрессовой и требовать высокой квалификации.
Изменения технологий: Быстрое развитие технологий в области AI/ML может потребовать постоянного обучения и адаптации к новым инструментам и методам работы.