Data engineer
Прямой работодатель Coins.ph ( coins.ph )
Опыт работы более 5 летот 4 500 до 6 000 $
Coins.ph – разработчик технологических решений в сфере электронных платежей.
Основной пайплайн работы data команды - собираем данные сервисов электронных платежей и пользователей, обрабатываем их и создаем интеллектуальные сервисы на базе облачной инфраструктуры AWS.
Команда data-инженеров очень востребована в компании, бизнес трансформируется в data-driven компанию, есть понимание необходимости вкладывания ресурсов в развитие аналитической платформы.
Идеальный кандидат - инженер с опытом разработки data-платформ (приземление данных, моделирование слоев датасетов, оптимизация производительности запросов, оптимизация инфраструктуры), написания ETL процессов на scala+python, проработки сервисов и инфраструктуры для работы ML пайплайнов.
Что нужно будет делать:
- - выстраивать хранилище данных и аналитическую платформу компании на основе aws/s3/spark/kafka/databricks/delta
- - разрабатывать ETL процессы на scala, python, sql
- - прорабатывать модель данных, слои датасетов под разные задачи fintech
- - разрабатывать инфраструктуру пайплайнов и сервисов ML (training+inference)
- - разрабатывать сервис Anti-fraud для финансовых транзакций
Требования:
- - Advanced programming skills using Java+Scala, Python, SQL
- - Good experience in apache spark
- - Good experience working with different storage engines
- - Good experience in data modelling and ETL development
Условия:
- - полная удаленка (была до covid и будет дальше)
- - гибкое расписание работы, смотрим кандидатов в UTC+8 - UTC+2
- - интернациональная команда
- - cutting edge cloud based environment and tools: AWS, k8s, docker, databricks, spark, delta, mlflow, scala, python
- - компактная команда профессионалов, постоянно развивающих платформу и инструментарий
- - нетривиальные проекты, которые развивает data команда - anti-fraud, anti-money laundering, customers funds protection