Команда «Персонализация Сбол.Про» в поисках опытного Инженера по Данным с навыками проектирования и разработки витрин данных, выстраивания Etl-процессов.
Команда занимается формированием и доставкой в сеть отделений банка в режиме онлайн наиболее релевантных для клиента предложений. Также отвечаем за расчет и поставку данных о персональной выгоде от сервисов банка м экосистемы. Результаты работы команды осязаемы – их видят большинство клиентов при входе в мобильное приложение или во время визита в отделение.
Обязанности
· Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных);
· Загрузка, очистка и трансформация больших объемов данных из различных источников (Rdbms, Hadoop, плоские файлы) в рабочую область (платформы GreenPlum и Hadoop)
· Проектирование и разработка аналитических витрин данных для целей аналитики и моделирования
· Мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
· Контроль качества загружаемых данных, разработка автоматизированных инструментов для оценки качества данных
· Разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных
· Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными
· Предоставление экспертной поддержки внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных
Требования
· Высшее техническое образование (компьютерные науки, математика, физика)
· От 1 года работы в качестве Data Engineer / Mle / Data Analyst
· Знание Sql на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов)
Уверенное знание Python/Java (Numpy, SciPy, Pandas, scikit-learn) и библиотеки pySpark
Опыт работы со стеком технологий Big Data (Hadoop, Spark, Hive/Impala, Kafka) или аналогами
Плюсом будет:
· Участие в проектах автоматизации отчетности для сегментов бизнеса: реклама, телеком, банки, retail
· Опыт работы с noSql базами данных
· Английский язык – достаточный для свободного чтения технической литературы
· Опыт работы по Agile (Scrum, Kanban, и т.д.) приветствуется
· Опыт разработки на языке Scala
· Опыт разработки и вывода инференса моделей
Условия
Требуется middle/senior data engineer (команда персонализация сбол про)
Web-разработчик, web-программист, программист python, разработчик, web-developer, программист, developer python, developer