Дата-инженер (DE)

04 Января

Город:

Нижний Новгород

Занятость:

Полная занятость

Компания "Сбербанк"

В команду аналитиков\дата-инженеров (DE) Блока Финансы требуются специалисты по работе с большими данными. Мы готовим и выгружаем данные для дата-сайентистов (DS) для обучения моделей машинного обучения. Как следствие, работаем по интересным задачам с широким спектром данных: розничные, корпоративные, экосистемные данные (продукты, клиенты, операции), что заметно развивает кругозор и профессиональную эрудицию наших сотрудников и делает работу интересной и насыщенной.

Мы используем современный техстек, который востребован в корпоративных хранилищах и исследованиях данных: Hadoop (+ Trino, HDFSGateway), SPARK, Python, GreenPlum.

Работаем в тесной кооперации с бизнес-аналитиками и дата-сайентистами, чтобы максимально быстро доставить качественные данные.

ЧТО НУЖНО ДЕЛАТЬ:

поиск и анализ исходных данных в DWH и исходных системах Банка
разработка выгрузок (извлекающих запросов), ad-hoc запросов
работа с бизнес-заказчиками, сбор и формализация требований в бизнес-терминах
проектирование, разработка витрин и наполнение данными
оптимизация запросов.

МЫ ЖДЕМ, ЧТО У ТЕБЯ:

высшее экономическое, финансовое или математическое образование
опыт разработки сложных SQL-запросов (несколько и более таблиц >100млн строк, использование аналитических функций)
опыт работы с SPARK API
опыт работы с ИИ-инструментами
знание банковских продуктов и опыт работы с банковскими данными (физические и юридические лица)
опыт сбора и документирования требований
опыт разработки промышленных решений (документирование требований, согласование, описание архитектуры решения, постановка задачи на разработку и приемка и т.д.)
опыт работы (написание и оптимизация запросов, проектирование витрин и т.п.) на классических СУБД (Teradata, Oracle, MS SQL, My SQL, Postgre и т.п.)
опыт работы на Hadoop(Hive\Impala) и\или SPARK
опыт проектирования и внедрения СУБД или DWH или BI
опыт разработки отчетности.