Data Engineer

Описание Проект работает с большими массивами разнородных данных: очищает, нормализует и объединяет их в единую согласованную структуру.

Задачи • Анализировать и обрабатывать базы данных из различных источников • Писать Python-скрипты для очистки, нормализации и преобразования данных • Разрабатывать алгоритмы сопоставления записей и поиска дубликатов • Сопоставлять адреса с разными форматами написания и выявлять соответствия между записями • Объединять разрозненные базы в единую структуру • Контролировать качество данных и автоматизировать процессы обработки

Требования • Уверенно владеть Python и SQL • Иметь опыт работы с большими таблицами и неструктурированными данными • Знать методы нечёткого сопоставления и разрешения сущностей • Уметь работать с Pandas, регулярными выражениями и базами данных • Самостоятельно разрабатывать скрипты для решения нестандартных задач • Будет плюсом: опыт работы с геоданными, адресными справочниками, GIS и процессами ETL/ELT

Условия • Оклад от 90000 KGS в месяц • Офис в Бишкеке