Data Engineer в платформу данных

Мы развиваем собственную платформу, которая включает инструменты по получению, обработке, загрузке и визуализации данных. С помощью этих инструментов мы: — каждый день загружаем терабайты информации в единое хранилище данных (DWH); — приводим информацию в удобный для восприятия вид; — предоставляем пользователям доступ к данным; — даем пользователям возможность проводить анализ и строить отчеты и графики. Сейчас мы ищем дата-инженеров, которые помогут развивать наши продукты. Часть инструментов мы разрабатываем с нуля, часть — на основе open-source-решений: Apache Airflow, NiFi, Zepellin, Flink и других.
Обязанности:
Участвовать в разработке ядра продуктов платформы данных Разрабатывать и оптимизировать процессы выгрузки данных Проводить код-ревью Разрабатывать сопроводительную документацию к продуктам
Требования:
У вас есть опыт работы инженером или разработчиком от 3 лет Знаете один из языков: Python или Java Знаете основы ООП, теорию алгоритмов и структуры данных Знаете SQL Умеете писать процессы загрузки данных (ETL) Знаете современные системы хранения данных (MPP и NoSQL) Знание Pandas, Numpy и Groovy на базовом уровне будет плюсом Знание Apache Kafka будет плюсом
Условия:
Возможность работы в аккредитованной ИТ-компании Работу в офисе или удаленно — по договоренности Офис на территории Сириуса недалеко от моря Обучение в корпоративном университете и на внешних программах. Участие в митапах, конференциях и мастер-классах Заботу о здоровье. Оформляем полис ДМС со стоматологией и страховку от несчастных случаев с первого дня работы. Предлагаем льготное страхование вашим близким Три дополнительных дня к основному отпуску Релокационный бонус и помощь с переездом в Сочи Оплату 50% от стоимости спортивного абонемента Компенсацию обедов, такси (300 ₽ в день) или парковки Льготные тарифы на продукты Т-Банка Партнерские программы для резидентов Сириуса Достойную зарплату — обсудим ее на собеседовании