Требуется data engineer с опытом не менее 2 лет для управления хранилищами данных и процессами ETL
О роли
Переведено с английского автоматически
О компании:
Мы — алгоритмическая торговая компания, ориентированная на данные, разрабатывающая системные торговые стратегии для финансовых рынков. Наша работа сочетает исследование финансовых рынков, анализ данных, бэктестинг и практическую разработку стратегий.
Поскольку эта сфера только развивается в Азербайджане, данная позиция представляет уникальную возможность для тех, кто хочет работать на стыке масштабной инженерии данных, финансовых рынков и количественных исследований.
Мы ищем специалиста, который находится на пересечении инженерии и исследований: человека с крепкими навыками программирования и обработки данных, достаточными знаниями в области Data Science и машинного обучения для совместной работы с исследователями, а также с любознательностью, чтобы самостоятельно погружаться в данные.
О вакансии:
Мы ищем инженера по обработке данных, который возьмёт на себя ответственность за слой данных, поддерживающий наши исследования и бэктестинг: сбор, валидацию, хранение и обработку больших объёмов рыночных данных, а также обеспечение корректной и быстрой работы всех построенных на их основе систем.
Одной из ключевых инженерных задач здесь является производительность. Мы работаем с многолетними минутными данными по множеству инструментов, а исследовательская работа требует многократного повторения одних и тех же вычислений. Код, который выполняется часами вместо минут, напрямую ограничивает объём исследований команды. Нам нужен человек, способный выявлять узкие места в производительности и предлагать эффективные решения.
Эта роль выходит за рамки классической инженерии данных. Примерно половина времени — инженерная работа, другая половина — исследовательская. В небольшой команде один специалист ведёт полный цикл: от необработанных данных с биржи, через хранение и конвейеры, быстрые вычисления, наборы данных и признаки для бэктестов и моделей машинного обучения, до анализа результатов. Мы ищем человека, который экспериментирует с данными, задаёт собственные вопросы, находит неожиданные закономерности и предлагает идеи, а не просто выполняет задачи по тикетам. Вы будете ежедневно работать с нашими количественными исследователями, а современные инструменты ИИ — обычная часть нашей работы. Если вам нравится момент, когда набор данных вдруг открывает что-то новое — эта роль для вас.
Ваша помощь будет нужна для решения вопросов, таких как:
- Как обрабатывать годы рыночных данных за минуты вместо часов, и где узкое место: ввод-вывод, память или вычисления?
- Как лучше хранить, разбивать на части и типизировать данные, чтобы тысячи бэктестов запускались эффективно?
- Насколько корректен этот набор данных? Есть ли пропуски, дубликаты, несоответствия временных меток или скрытые ошибки?
- Можно ли векторизовать или скомпилировать вычисления, или нужна совсем другая алгоритмика и структура данных?
- Какие признаки можно извлечь из сырых рыночных данных для машинного обучения без утечки информации из будущего в прошлое?
- Реальна ли обнаруженная закономерность или она появилась из-за множества тестов и выбора лучшего результата?
- Что ещё скрыто в данных, что никто не исследовал?
Обязанности:
- Проектировать, строить и поддерживать конвейеры данных для сбора, очистки, валидации и хранения больших объёмов рыночных данных
- Отвечать за качество данных: обнаружение пропусков, удаление дубликатов, проверка целостности временных меток, сверка между источниками, автоматическая валидация
- Профилировать и оптимизировать критичный по производительности код с помощью векторизации, оптимизации расположения в памяти, разбиения на чанки, JIT-компиляции, параллелизма и эффективных форматов хранения
- Создавать и поддерживать наборы данных и признаки для бэктестинга и машинного обучения
- Поддерживать полный цикл работы с машинным обучением: инженерия признаков, подготовка данных, пайплайны обучения и оценки, защита от утечки данных
- Самостоятельно анализировать данные, применять статистические и математические методы, искать закономерности, выдвигать гипотезы и предложения для исследовательской команды
- Писать чистый, протестированный и воспроизводимый Python-код, следуя лучшим инженерным практикам (модульность, контроль версий, код-ревью, документация)
- Проектировать SQL-схемы, писать сложные запросы и оптимизировать их
- Изучать новые инструменты, библиотеки и подходы, объективно их оценивать и предлагать к внедрению лучшие
- Чётко доносить результаты как техническим, так и нетехническим членам команды
Требования:
- Высшее образование в области компьютерных наук, инженерии, математики, статистики, Data Science или смежных количественных дисциплин
- Минимум 2 года профессионального опыта в области инженерии данных, разработки ПО, Data Science или аналогичной сфере
- Сильное аналитическое мышление и искренний интерес к математическим методам, исследованию данных и научной работе (главный критерий для нас)
- Прочные основы программной инженерии: структуры данных, алгоритмы, анализ сложности, чистый и модульный код, тестирование, контроль версий
- Практический опыт работы с большими наборами данных (миллионы строк и более), включая данные, не помещающиеся полностью в оперативную память
- Понимание вопросов производительности: профилирование кода, определение узких мест (CPU, память, I/O) и их устранение
- Уверенные навыки Python с использованием pandas, NumPy и numba
- Продвинутые знания SQL: сложные объединения, агрегации, оконные функции, индексация и оптимизация запросов
- Уверенная работа с Linux, Docker, облачной инфраструктурой и CI/CD
- Базовые знания статистики: описательная статистика, вероятность, распределения, дисперсия, корреляция, выборки и основы проверки гипотез
- Знания в области машинного обучения: классические алгоритмы (линейная и логистическая регрессия, деревья решений, случайные леса, градиентный бустинг, кластеризация), когда и почему их применять, кросс-валидация, а также типичные ошибки — переобучение и утечка данных
- Ежедневное использование инструментов с поддержкой ИИ для кодирования и исследований с привычкой проверять их результаты
- Способность работать самостоятельно и доводить задачу от расплывчатого вопроса до готового, проверенного результата
- Инициативность и исследовательские способности: изучение новых проблем, формирование собственного мнения и предложение идей
- Знания углублённых статистических методов (контроль множественных тестов, бутстрэп, статистика временных рядов) и опыт работы с шумными данными с низким отношением сигнал/шум будут большим плюсом
- Опыт работы с финансовыми рынками или криптовалютными данными, инструментами организации рабочих процессов (Airflow, Prefect, Dagster) и понимание таких проблем, как look-ahead и survivorship bias, также приветствуются
Почему стоит работать у нас?
- Работа в одной из первых корпоративных компаний по алгоритмической торговле в Азербайджане.
- Полная ответственность за слой данных реальной исследовательской и торговой системы с нуля.
- Решение реальных задач по оптимизации производительности в масштабах, где ваши улучшения экономят часы каждый день.
- Прямое влияние на направление исследований: ваши находки и предложения формируют будущие тесты.
- Тесное сотрудничество с количественными исследователями и разработчиками стратегий в небольшой, динамичной команде быстрорастущей компании.
- Профессиональный рост с реальными возможностями развития и карьерного продвижения.
- Частная медицинская страховка.
- Обед, напитки, закуски и фрукты за счёт компании.
- Офис в центре города с современными удобствами, включая игровую комнату и зоны для отдыха.
График работы:
Пятидневная рабочая неделя с 10:00 до 19:00 (обед с 13:00 до 14:00). Четыре дня в офисе, один день (пятница) — удалённо.
Зарплата: Конкурентоспособная, обсуждается индивидуально в зависимости от опыта и квалификации.
Ждём ваши отклики.
Обратите внимание, что на последующие этапы отбора будут приглашены только кандидаты, прошедшие предварительный отбор.
Подходишь ли ты на эту вакансию?
Загрузи CV — за 10 секунд увидишь процент совпадения, свою цену на рынке и чего не хватает в резюме.
Зарплата на рынке
Работодатель сумму не назвал. По роли «Data-инженер» обычно платят 1 000–2 550 ₼, медиана — 2 000 ₼.
13 открытых вакансий, 7 зарплат: объявления, анкеты, «Проверь зарплату».
Проверить свою зарплату как «Data-инженер»О компании
Ваш отклик
Этот работодатель принимает отклики у себя на сайте. Перейдите на страницу вакансии и заполните форму там.
Перейти на страницу работодателяВопросы об этой вакансии
Рабочее место находится в городе Баку.
Требуется минимум 2 года профессионального опыта.
Требуется степень бакалавра в области компьютерных наук, инженерии, математики, статистики, науки о данных или смежных областях.
Требуются знания Python и SQL.
Необходимы навыки работы с Linux, Docker, облачной инфраструктурой и CI/CD.
Требуются базовые знания классических алгоритмов машинного обучения и их применения.
Кнопка «Откликнуться» на этой странице ведёт на страницу отклика работодателя.
Перейти к форме откликаПохожие вакансии
Все похожие вакансииДругие открытые объявления по роли «Data-инженер» в городе Баку.
Специалист по сбору данных из банковских систем и разработке ETL процессов.
В проектах AI и BI разрабатывает ETL/ELT пайплайны и Data Warehouse, требуются сильные знания SQL и Python.
Требуется Data Engineer для разработки моделей данных и управления ETL конвейерами.




