Data engineer / Инженер данных

Компания "Бюджетные и Финансовые Технологии"

Приглашаем в команду Инженера данных в команду разработки и сопровождения КХД на проект "Работа в России" - многофункциональная экосистема рынка труда, обеспечивающая: поиск работников и работы, оказание государственных услуг в области труда и занятости в электронном виде, поддержку социально незащищенных групп граждан, предоставление аналитических данных о состоянии рынка труда.

ЕЦП включает в себя порталы: «Работа в России», Личных кабинетов Работодателя и СЗН, Образовательная платформа, «Открытый бюджет», «Национальные проекты», «Инициативное бюджетирование», аналитического хранилища данных.

Собственная платформа ETL для наполнения хранилища данных, платформа с описанием метаданных по обслуживающимся СУБД.

Стек проекте: ClickHouse, Cassandra, Posgresql, ADB, ETL\ELT (Pentaho Di, SSIS и т.п.)

Обязанности:

• Разрабатывать и поддерживать в рабочем состоянии хранилища данных;
• Поддерживать в актуальном состоянии Datacatalog (инструмент, в котором можно найти краткую сводку по метаданным в БД, увидеть их структуру и бизнес наименования, проследить lineage (путь данных от системы-источника до целевой таблицы));
• Анализировать информационные потребности структурных подразделений организации в части СУБД;
• Осуществлять мониторинг работы БД, в том числе различными автоматизированными средствами;
• Разрабатывать на T-SQL, PL/pgSQL, DML, DDL (объекты, индексы, триггеры, функции, хранимые процедуры и представления);
• Доработать\оптимизировать\написать SQL скрипты;
• Работать с ETL\ELT системами;
• Управлять вычислительными ресурсами, взаимодействующими с БД;
• Определять критерии оптимизации производительности БД;
• Определять критерии оценки при изменении конфигурации компонентов вычислительной сети, взаимодействующих с БД;
• Осуществлять анализ\поиск ресурсоемких запросов к БД;
• Оптимизировать выполнение ресурсоемких запросов к БД;
• Определять стратегию управления распределением данных в ресурсах, предназначенных для размещения БД;
• Решать поставленные задачи в запланированный срок;
• Самостоятельно решать сложные задачи.

Требования:

• Наличие опыта работы в области разработки и внедрения систем хранения данных от 3-х лет;
• Наличие опыта разработки хранилища данных;
• Наличие опыта работы с СУБД PostgreSQL - развёртывания систем, настройка планов обслуживания;
• Умение решать поставленные задачи в запланированный срок;
• Способность расставлять приоритеты при работе с несколькими задачами;
• Наличие навыков делового общения;
• Знание ClickHouse, Cassandra, Posgresql, ADB;
• Наличие опыта работы с ETL\ELT системами (Pentaho Di, SSIS и т.п.);

Будет плюсом:

• Опыт работы с GIT;
• Наличие опыта разработки планов обслуживания и резервного копирования БД;
• Знание основ операционных систем на базе Unix/Linux на уровне администратора;
• Наличие опыта организации мониторинга работы СУБД.

Условия:

• Работу в аккредитованной ИТ-компании с официальным трудоустройством по ТК РФ
• Корпоративную технику для комфортной работы
• ДМС после испытательного срока с возможностью страхования детей и родственников
• Участие в корпоративных мероприятиях и праздниках в кругу профессионалов, где ценят вклад каждого
• Реферальную программу с вознаграждением за рекомендации друзей в нашу команду
• Оплату посещения профильных конференций и курсов, поддержку в подготовке к публичным выступлениям и написанию статей на Хабр
• Удаленный формат работы с локацией на территории РФ
• Работа в часовом поясе +10 к мск (старт в 22/23/00 по мск)