Компания:Сбербанк

Город: Москва

Позиция: Data Engineer

Требуемый опыт работы:1–3 года

Полная занятость,полный день

Описание проекта:

Молодая амбициозная команда блока «Технологии» Сбера ищет Data Engineer.

Мы разрабатываем и внедряем AI инициативы, нацеленные на повышение эффективности и улучшении бизнес-процессов Банка: от снижения операционных расходов и затрат до анализа цифровых следов, характеризующих поведенческие паттерны. Во время работы у вас появится возможность познакомиться и поработать с огромным технологическим стеком. Вам предстоит выстраивание ETL процессов с использованием различных источников данных – PostgreSQL, MS SQL, Hadoop.

Есть возможность поработать с основными технологиями:

BigData – Apache Spark, Hive, Impala.

DevOps – Jenkins и OpenShift.

Возможности профессионального роста и обучения новому очень большие. Банк предоставляет возможность пройти обучение различным дисциплинам как внутри банка, так и вне.

У нас амбициозные планы и мы ищем людей, готовых реализовывать их совместно с профессиональной командой. Идей и задач масса, никакого микроменеджмента, полная самостоятельность и ответственность за результат ##. Большое профессиональное сообщество - отдельный плюс.

Обязанности:

• Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных);
• Загрузка, очистка и трансформация больших объемов данных из различных источников (RDBMS, Hadoop, плоские файлы) в рабочую область (платформы и Hadoop, PostgreSQL)
• Проектирование и разработка аналитических витрин данных для целей отчетности и моделирования
• Мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
• Контроль качества загружаемых данных, разработка автоматизированных инструментов для оценки качества данных
• Разработка, поддержка и оптимизация инфраструктуры и внутренних сервисов для обработки больших объемов данных
• Разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных
• Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными
• Предоставление экспертной поддержки внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных

Требования:

• Высшее техническое образование (IT, математика, физика)
• Опыт работы с данными в качестве инженера, аналитика или ETL- разработчика
• Знание SQL на хорошем уровне (подзапросы, хранимые процедуры, оптимизация запросов и т.д.)
• Опыт работы с большими объемами данных с использованием промышленных РСУБД (Oracle, MS SQL, PostgreSQL, и т.д.)
• Работа с linuxкомандной строкой(bash\shell), опыт работы в IDE (pycharm,eclipse, visual studio и другие)
• Английский язык – достаточный для свободного чтения технической литературы
• Плюсом будет знание Python в части написания скриптов для анализа/обработки данных
• Плюсом будет опыт реализации витрин данных / хранилищ данных
• Плюсом будет опыт работы со стеком технологий Big Data (Hadoop, Spark, Hive/Impala)

Условия:

• Профессиональное обучение, семинары, тренинги, конференции;
• Годовые премии;
• ДМС, сниженные ставки по кредитованию, программы лояльности для сотрудников;
• Самые инновационные, амбициозные проекты и задачи;
• Бесплатный фитнес-зал;
• Дисконт-программа от множества компаний партнеров.