Data Engineer

Описание вакансии

На данный момент мы в поисках инженера данных, специализирующегося на построении эффективных пайплайнов для сбора, обработки, хранения и предоставления данных конечным пользователям.
Описание вакансии:
Требования:
• от 1 года опыта работы на идентичной позиции
• хорошее владение Python
• хорошее владение SQL (PostgreSQL)
• опыт реализации ETL пайпланов с помощью инструмента Talend DI или его аналогов
• опыт работы с очередями и брокерами сообщений (RabbitMQ, Kafka)
• понимание контейнеризации и опыт работы с Docker и K8S
• опыт проектирования архитектуры БД
• опыт работы с Linux
• опыт работы с Git
• опыт работы с инструментами Postman/Insomnia
Будет плюсом:
• знание C#, Go
• опыт проведения интеграций со сторонними системами
• опыт проектирования Data Warehouse и Data Lake
• опыт работы с ElasticSearch, Data Build Tool(DBT), ClickHouse
• понимание микросервисной архитектуры и опыт работы с gRPC фреймворком
• опыт работы с Apache Airflow
• опыт работы с Big Data и оптимизацией запросов
• опыт работы и внедрения Debezium(CDC)
• опыт проектирования потоковой(стриминговой) обработки данных с помощью Apache Spark
• полностью офисный формат
• оформление по ТК РК
• график работы 5/2, с 09:00-18:00
• месторасположение офиса: г. Алматы, ул.Ходжанова 79, БЦ «Аврора»