Data Engineer
Альтернативный оператор сотовой связи, который работает в России с 2003 года. У компании более 40 миллионов абонентов в 67 регионах России и более 8000 профессионалов в команде. Компанию объединяют ценности: открытость, качество, вызов, гибкость, бережливость и действие, которые сохраняются со времен создания в Швеции в 1993 году.
Обязанности:
- Создание прототипов объектов (структур, витрин) внутри слоев DDS/BDS хранилища EDW (Teradata), и внутри стека Hadoop (HDFS, Hbase);
- Разработка и внедрение шаблонов цепочки обработки данных: предоставление инструментов, инструкций, схем и пр.;
- Подключение новых источников данных из внешних и внутренних систем с целью быстрого прототипирования и оценки полезности данных для задач BDO;
- Имплементация решений, обеспечивающих лучшую скорость внедрения, максимальную производительность и безотказность работы – перенос созданных Data Scientists ML моделей в продуктивную среду – разработка на инструментах Teradata, Apache Hadoop и Kubernetes и других фреймворках;
- Внедрение и тестирование новых инструментов обработки и анализа данных (библиотек машинного обучения, фреймворков Hadoop и пр).
Требования:
- Уверенное знание Kubernetes, Docker, SQL, Hadoop и Spark;
- Языки программирования Scala, Python;
- Уверенное знание систем совместной разработки и хранения кода (GitLab);
- Опытный пользователь ОС Linux;
- Опыт работы с NoSQL базами;
- Опыт работы с инструментами CI/CD;
- Опыт работы с инструментами мониторинга.
Условия:
- Офис в Москве на м. Румянцево;
- Премия до 35% годового дохода;
- Можно обсуждать частично удаленный формат работы;
- ДМС;
- Компенсация связи;
- Компенсация спорта через год.