Data engineer

Москва
Постоянная работа
Полная занятость

28 д. назад

«Петрович-Тех» строит и развивает цифровую экосистему для крупного ретейла в области строительства и DIY (коротко о «Петровиче»: 30 лет на рынке, №1 среди DIY-магазинов в России (по версии DIY&Household awards 2019), а наш интернет-магазин входит в топ-20 крупнейших интернет-магазинов России (E-Commerce Index TOP-100)).Специфика предметной области определяет основные направления ИТ-экспертизы: построение высоконагруженных систем, прикладная часть Machine Learning и Data Science, проектирование микросервисной архитектуры и многое другое. А ещё с нами у тебя будет возможность влиять на конечный продукт и видеть результаты своей работы в реальном мире, действовать без многоступенчатых согласований; и возможности для развития, не уступающие тем, что есть ИТ-корпорациях.
И, конечно, в первую очередь, «Петрович-Тех» - это люди, наш продукт и компания для людей и про людей. Сегодня в нашей команде уже больше 270 крутых специалистов, и, возможно, мы ищем именно тебя!С увеличением задач от бизнеса, мы в поиске еще одного Data EngineerОжидания от кандидата

глубокие знания SQL;
умение работать с планами запросов;
опыт работы с ClickHouse;
опыт работы с брокерами сообщений (Kafka);
опыт работы с Kubernetes проектами;
опыт работы с Java;
практический опыт участия в проектах по созданию DWH, Data lake;
практический опыт построения и развития высоконагруженных систем.

Наш стек:
ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI\Flask API, JavaУсловия работы

официальное трудоустройство в аккредитованную ИТ компанию ООО "Петрович-Тех";
полис ДМС через 3 месяца, ДМС+стоматология через год;
участие в конференциях и обучение;
йога в офисе, команды по баскетболу, волейболу, футболу;
классные корпоративы;
график работы: 5/2, удаленный формат работы, но можно работать в нашем уютном и лучшем офисе Санкт-Петербурга на Беговой, у нас есть велопарковка и корпоративный транспорт от м. Черная речка, м. Лесная до офиса и обратно;
чай, кофе, печеньки, пицца, мороженное, сезонные фрукты;)
врач в офисе (1 раз в неделю).

Чем предстоит заниматься:

разработка хранилища данных на базе ClickHouse;
построение ETL-процессов;
написание / оптимизация / профилирование SQL/NoSQL запросов;
расчет сложных аналитических показателей в витринах данных;
настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных);
участие в тестировании потоков с целью обеспечения их стабильной работы;
написание backend сервисов на Java;
участие в разработке архитектуры, процессов и инструментов для работы с данными;
обеспечение контроля качества данных, мониторинг, анализ и устранение проблем с качеством данных.

Хабр Карьера

Откликнуться