Data Engineer
Вакансия Data Engineer в крупном ритейле. Требуется разработка, реализация и поддержка интеграционных решений на стеке BigData, работа с Java/Groovy, SQL, ETL‑инструментами, Hadoop, Hive, Unix/Linux. Необходимы навыки работы с Git, Docker, Rancher, CI/CD, а также умение разрабатывать архитектурные схемы и писать документацию.
Обязанности
Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий (Java, Groovy, Apache Nifi, Airflow); определение стека технологий для конкретных проектов и задач; решение технически сложных задач; оперативная реакция на информацию о проблемах; разработка и контроль актуальности документации; предоставление отчетов руководству; контроль качества интеграционных решений и создание задач/дефектов для рефакторинга; определение технологической стратегии развития проекта или продукта; выстраивание процессов (CI/CD, код‑ревью) и развитие инженерных практик
Требования
Владение одним из языков программирования (Java, Groovy); знание принципов ООП; умение читать чужой код; сборка проекта, компиляция и деплой в Rancher (Docker); опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке BigData; знание SQL (индексы, функции, чтение планов запросов, оптимизация); опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.); умение работать с Git в консоли; знание особенностей работы ETL‑инструментов (Apache Nifi, Airflow, SAP BW, Talend, Informatica, SAS и т.п.); опыт работы с Hadoop, понимание устройства HDFS, форматов данных; опыт работы с Hive или другим хранилищем на основе Hadoop; опыт использования систем ведения проектов и документации; умение работать с архитектурными схемами; понимание принципов построения и хранения данных — DWH и DataLake; желателен опыт администрирования Unix/Linux или Hadoop (HDFS, Yarn, Ranger, Spark, Zookeeper), Zabbix, Ansible
Условия
Рейт: до 1900 р/час; Формат работы: Удаленно; Загрузка: Фултайм; Формат оплаты: отсрочка платежа 45 календарных дней; Рассматриваем только штатных специалистов
Откликнуться на вакансию свайпом в Telegram
Работа дата-инженером — все вакансии подборки
Swipe Jobs — поиск работы свайпами в Telegram. Тысячи вакансий из каналов и с сайтов компаний в одной ленте, отклик в один клик прямо в чате с работодателем.