Data Engineer

• Разработка, реализация и поддержка типовых интеграционных решений, на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow)
• Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок.
• Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных.
• Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством

• Общее представление о стеке технологий BigData.
• Понимать различия работы между BigData и с данными обычного размера.
• Знание SQL (индексы, функции, умение писать не сложные запросы).
• Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).
• Умение работать с Git (знание команд git pull/commit/push).
• Опыт работы с любым графическим ETL инструментом (Apache Nifi, Airflow, Talend, Informatica, SAS и т.п.).
• Представление о работе с Hadoop.
• Понимание устройства HDFS, форматов данных.
• Понимание работы с Hive или любого другого хранилища на основе Hadoop.
• Опыт использования системами ведения проектов и документации.
• Знания основ программирования (JAVA, Groovy, Python)

• работа в полностью удаленном режиме;
• стабильно и вовремя выплачиваемая зарплата;
• оклад обсуждается индивидуально в зависимости от вашего опыта;
• работа с профессионалами своего дела;
• разнообразие проектов и возможность развиваться в IT.

Хабр Карьера