Data Engineer
Альтернативный оператор сотовой связи, который работает в России с 2003 года. У компании более 40 миллионов абонентов в 67 регионах России и более 8000 профессионалов в команде. Компанию объединяют ценности: открытость, качество, вызов, гибкость, бережливость и действие, которые сохраняются со времен создания в Швеции в 1993 году.
Обязанности:
- создание прототипов объектов (структур, витрин) внутри слоев DDS/BDS хранилища EDW (Teradata), и внутри стека Hadoop (HDFS, Hbase);
- разработка и внедрение шаблонов цепочки обработки данных: предоставление инструментов, инструкций, схем и пр.;
- подключение новых источников данных из внешних и внутренних систем с целью быстрого прототипирования и оценки полезности данных для задач BDO;
- имплементация решений, обеспечивающих лучшую скорость внедрения, максимальную производительность и безотказность работы – перенос созданных Data Scientists ML моделей в продуктивную среду – разработка на инструментах Teradata, Apache Hadoop и Kubernetes и других фреймворках;
- внедрение и тестирование новых инструментов обработки и анализа данных (библиотек машинного обучения, фреймворков Hadoop и пр).
Требования:
- уверенное знание Kubernetes, Docker, SQL, Hadoop и Spark;
- языки программирования Scala, Python;
- уверенное знание систем совместной разработки и хранения кода (GitLab);
- опытный пользователь ОС Linux;
- опыт работы с NoSQL базами;
- опыт работы с инструментами CI/CD;
- опыт работы с инструментами мониторинга.
Условия:
- офис в Москве на м. Румянцево;
- премия до 35% годового дохода;
- можно обсуждать частично удаленный формат работы;
- ДМС;
- компенсация связи;
- компенсация спорта через год.