Senior Data Engineer в Sber Ai Lab

В команду лаборатории искусственного интеллекта Сбера приглашаем опытного Data Engineer .Мы создаем новые алгоритмы и open source библиотеки, Sota технологии с широким спектром применений в бизнесе; Проводим исследования по наукоёмким технологическим задачам важным для бизнеса и общества; Участвуем в создании Mvp, апробируем свои решения вместе с бизнесом, Ai&Ds сообществом. В лаборатории Ии работает 50+ сотрудников, из них 10+ имеют научную степень PhD. В команде есть победители хакатонов и соревнований: 5 мастеров Kaggle, 2 Грандмастера Kaggle.

Обязанности

• Предстоит организовать системную работы как с банковскими, так и открытыми данными для Лаборатории; организовать реализовать бенчмарки для сравнения разных постановок решения Ml задач на одних и тех же данных внутри Банка
• Разработка пайплайнов по обработке данных.
• Подготовка датасетов из больших массивов сырых данных, первичный анализ данных, запуск и доработка пайплайнов машинного обучения на базе наших опен сорс библиотек;
• Выявление артефактов в данных;
• Инженерная часть разработки наукоемких технологий в части инжиниринга данных;
• Взаимодействие с прикладными командами банка по внедрению технологий, разработанных лабораторией;
• Организация инфраструктуры хранения данных для исследований

Требования

• Хорошее знание Python (в т.ч. опыт работ с какими-то из Python фреймворков по подготовке данных (Pandas, NumPy, SciPy, PySpark),
• Опыт разработки от 1 года.
• Высокая техническая грамотность (алгоритмический базис)
• Понимание основ machine learning или deep learning;
• Опыт работы с Apache Spark обязателен
• Знание Sql
• Опыт работы с Mpp GreenPlum будет преимуществом
• Умение анализировать научную литературу, разбираться в незнакомой теме
• Желание заниматься инженерной и инфраструктурной стороной проблемы
• Scripting (bash/powershell) обязателен, поднимать и настраивать сервера в облачных средах часто приходится самостоятельно
• Опыт разработки под Linux среды (Ubuntu, RedHat) обязателен
• Знание систем контроля версий, опыт коллективный разработки. У нас Git (BitBucket внутри сети банка и GitHub/GitLab в остальных случаях)
• Опыт с системами версионирования данных типа Dvc является плюсом
• Приветствуем инициативность, самостоятельность, командную работу и хороший юмор, желание сделать полезный вклад в развитие лаборатории, банка и опен сорс

Условия

• Дружный и высококвалифицированный коллектив;
• Уникальные масштабные проекты, работа в приоритетном направлении;
• Достойная заработная плата (оклад + годовая премии);
• Современные рабочие места и программное обеспечение;
• Дмс, корпоративная пенсионная программа, страхование от несчастных случаев, социальные гарантии, корпоративные мероприятия;
• Высокий уровень корпоративной культуры;
• Комфортный офис Sbergile Home с оупенспейсами, лаунж зонами, кафе, рестораном и оборудованными кухнями;
• Возможен гибридный формат работы из Москвы.
• Современный спортзал.

Требуется senior data engineer в sber ai lab

Web-разработчик, web-программист, программист python, разработчик, web-developer, программист, developer python, developer