Data Engineer

Вакансия Data Engineer в крупный ритейл. Требуется разработка, реализация и поддержка интеграционных решений на стеке технологий BigData.

Обязанности

Самостоятельная разработка, реализация и поддержка интеграционных решений на стеке технологий, принятых в команде. Определение стека технологий для конкретных проектов и задач. Решает технически сложные задачи, которые не могут решить другие инженеры в команде. Оперативно реагирует на информацию о проблемах в зоне ответственности, выполняет задачи в установленные сроки. Разрабатывает и контролирует актуальность документации по взаимодействию конфигурационных единиц платформы больших данных. Предоставляет отчеты о своей деятельности начальнику отдела/руководителю в порядке, установленном руководством. Контроль качества интеграционных решений с последующим созданием задач/дефектов для рефакторинга. Определяет технологическую стратегию развития проекта или продукта, работает на перспективу. Выстраивает процессы (например, CI/CD, код-ревью), внедряет и развивает инженерные практики.

Требования

Владение одним из языков программирования (Java, Groovy), знание принципов ООП, умение читать чужой код. Сборка проекта, компиляция и деплой в Rancher (Docker). Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData. Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов). Опыт работы с любой реляционной БД. Умение работать с Git в консоли. Знание особенностей работы ETL-инструментов. Опыт работы с Hadoop. Понимание устройства HDFS, форматов данных. Опыт работы с Hive или любым другим хранилищем на основе Hadoop. Опыт использования систем ведения проектов и документации. Умение работать с архитектурными схемами. Понимание принципов построения и хранения данных — DWH и DataLake. Желателен опыт администрирования Unix/Linux или Hadoop.

Условия

Грейд: Senior. Локация: РФ/РБ. Формат работы: Удаленно. Загрузка: Фултайм.

Откликнуться на вакансию свайпом в Telegram

Зарплату работодатель не указал. Ориентир по данным исследований.

Работа дата-инженером — все вакансии подборки

Swipe Jobs — поиск работы свайпами в Telegram. Тысячи вакансий из каналов и с сайтов компаний в одной ленте, отклик в один клик прямо в чате с работодателем.