Data Engineer (Senior)

Описание

О нас:
HuntIT - это передовое рекрутинговое агентство, которое специализируется на поиске и подборе высококвалифицированных специалистов в сфере IT и Digital, сотрудничает с ведущими IT-компаниями, рекламными агентствами и работает над крупными проектами.

О компании-заказчике:
01.tech IT-компания, создающая передовые веб-платформы, оказывающие влияние на мировую индустрию!

Основная цель создание высоконагруженных систем, ежедневно обрабатывающих десятки тысяч запросов в секунду, терабайты данных и поддерживающие более 100 миллионов пользователей по всему миру.

В связи с активным расширением 01.tech мы находимся в поисках Senior Data Engineer

Задачи:

• Разработка приложений потоковой обработки данных на Apache Flink / Spark Structured Streaming.
• Разработка приложений пакетной обработки данных Spark
• Принимать участие в разработке стандартов;
• Разработка мониторинга приложений.

Требования:

• Хорошие знания в потоковой обработке (Stateful - Stateless).
• Опыт разработки приложений потоковой обработки Apache Flink / Spark Structured Streaming.
• Навыки программирования - Java, Scala;
• Опыт работы с MPP-системами (ClickHouse, Snowflake, Redshift, Greenplum и т.п.);
• Понимание устройства файловых систем S3 / HDFS;
• Опыт интеграции с Kafka / CDC коннекторами (Debezium, Kafka Connect);
• Уверенный опыт Spark / PySpark / Scala;
• Опыт SQL-оптимизации.

Будет плюсом

• Опыт работы с AWS (EMR, Glue, MSK), автоматизацией пайплайнов (Airflow), практики DevOps (CI/CD, контейнеризация).

Условия:

• Качественный опыт, рост скиллов и максимально комфортная рабочая атмосфера;

• Гибкое начало рабочего дня с 9:00 до 11:00 по МСК;

• Офисы представлены в 2 странах мира;

• Гибридный или удаленный формат работы;

• Полностью оборудованное рабочее место с предоставлением техники;

• ДМС со стоматологией после испытательного срока;

• Компенсация занятий спортом, английского языка и сессий с психологом;

• Зоны отдыха с настольным теннисом, самокатами и кухней;

• Корпоративная библиотека;

• Корпоративы с выездами на природу и призами, тимбилдинги, мастер-классы и т. д.;

• Релокационный пакет и возможность получения отсрочки от призыва на мобилизацию.