В приложение HUMANS требуется Data Platform Owner.
Humans - международная компания, которая запустила финтех-суперапп в Узбекистане, включающий мобильную связь, интернет, оплату международной картой Humans VISA, маркетплейс.
Будут рады как уже состоявшемуся человеку, так и человеку на вырост (с позиции тим лида зрелых команд).
Задачи:
Стратегия, архитектура и технологический стек:
- Разработка стратегии развития сервиса КХД/ETL/Reporting
- Поиск узких мест решения, формирование плана устранения
- Выбор и тестирование новых платформ/технологий для решения КХД/ETL/Reporting
- Развитие datascience, разработка и внедрение ML/AI решений (сейчас слабо развито направление)
Управление командой:
- Формирование внутренней команды дата-инженеров (сейчас 4 человека, планируют рост), поиск, собеседование кандидатов
- Обучение новых сотрудников, разработка обучающих материалов
- Определение приоритетов задач, распределение задач по дата-инженерам, контроль сроков и качества выполнения задач
Развитие решения:
- Сбор и анализ требований от бизнес-заказчиков на разработку ETL-процессов, витрин данных в КХД, отчётов и информационных панелей
- Подготовка и согласование технических заданий на разработку отчётности
- Проектирование витрин данных в КХД (PostgreSQL, Vertica, Hadoop)
- Разработка ETL-процедур для интеграции с системами-источниками (PostgreSQL, Oracle, MariaDB, MySQL, BigQuery, Kafka)
- Разработка ETL-процедур для формирования справочников, таблиц фактов и витрин данных в КХД (TalendETL, знание необязательно, желание изучить обязательно)
- Разработка дашбордов и отчётов на базе платформы Tableau
- Презентация результатов бизнес-заказчикам
Эксплуатация решения:
- Выполнение задач поддержки BI-решения – ежедневный мониторинг ETL-процедур и обновления дашбордов
- Участие в устранении аварий и инцидентов (в формате дежурств, сменный режим, поддержка сервисов 24/7)
- Участие в плановых работах по миграции, обновлению решения и т.д.
- Взаимодействие с подрядчиками в части администрирования КХД и ETL
Пожелания:
- Навыки управления командой, постановки задач и мотивации сотрудников
- Навыки взаимодействия с подрядчиками
- Уверенное знание языка SQL, умение писать сложные запросы, скрипты, использовать оконные функции и т.д. - DDL, DML, DCL, TCL
- Опыт проектирования витрин данных и таблиц фактов (нормализованные и денормализованные витрины), использование индексов в СУБД PostgreSQL
- Опыт разработки ETL/ELT-процедур (initialloading инкрементальная загрузка витрин и справочников)
- Опыт разработки отчётов и информационных панелей в системе отчётности TableauDesktop
- Коммуникабельность, аналитическое мышление, умение самостоятельно искать варианты решения задач
Опционально:
- Опыт работы в Unix/Linux окружении, использование командной строки и стандартных утилит
- Опыт работы с СУБД Vertica, Hadoop/Impala
- Опыт установки и администрирования TableauServer
- Опыт разработки отчётности с помощью JasperReports