Data Engineer
- Компания
- Волков
- Где
- Kemerovo, Russia
- Зарплата
- 125 тыс. ₽/мес
- Опубликовано
- 2026-10-30
Навыки: 1C, Airflow, Bash, ChatGPT, ClickHouse, Docker, ELT, ERP, ETL, Linux, Pandas, PostgreSQL, Power BI, Python, S3
Вам предстоит:
• Разработка и поддержка DAG-ов в Apache Airflow 2.x: Python-операторы, TaskGroup, dynamic task mapping, сенсоры. • Оркестрация ETL/ELT: ClickHouse, PostgreSQL, 1С/ERP, Excel/CSV/TXT, внешние API. • Настройка расписаний, retries, таймаутов, алертов по падениям. • Работа с Connections/Variables: вынос секретов и путей из кода. • Рефакторинг «монолитных» скриптов в модульные DAG-и с переиспользуемыми функциями. • Диагностика инцидентов по логам Airflow, ведение базы типовых ошибок. • Документирование DAG-ов и обучение сотрудников.
Ждем от Вас:
• Опыт работы с Airflow от 1 года (написание своих DAG-ов). • Уверенный Python 3.10+ и pandas (merge, concat, groupby, обработка дат). • Продвинутый SQL (JOIN, оконные функции, CTE), опыт с ClickHouse и PostgreSQL. • Опыт в Linux (bash, systemctl, docker, venv, pip). • Понимание DWH-слоёв и места DAG-ов в архитектуре. • Excel на уровне сводных таблиц и сложных формул. • Опыт с BI-инструментами (Datalens, Tableau, Power BI). • Навык презентации результатов бизнесу. • Опыт миграции скриптов в Airflow. • Опыт с 1С (консоль запросов, выгрузки). • Настройка алертов (email, Max, Bitrix24). • Опыт с ИИ-ассистентами (ChatGPT, Codex, GigaChat) и формирование базы промтов. • Опыт обучения сотрудников. • Понимание пирамиды метрик. • Docker/docker-compose, S3/parquet, ClickHouse-словари.
Выбирая нас, ты получаешь:
• Полный соцпакет, как говорится, по всем правилам ТК РФ – все, как положено! • Работаешь у нас? Готовься к взлету!…
Полный текст и отклик — на странице работодателя.