Data Engineer

11 марта 2019347 просмотров
Описание вакансии

Constanta специализируется на разработке собственных продуктов для букмекерской и спортивной индустрии: mobile/web решения (150k+ dau), инфраструктурные сервисы. Мы активно развиваем ML-направление, в прошлом году создали систему видеоаналитики спортивных событий.

Мы открыты для новых технологий и направлений. За прошедшие 1,5 года мы создали сomputer vision команду, перешли на новый фреймворк на фронтенде (Vue.js), написали приложение на Electron, работали с Raspberry Pi, внесли свой скромный вклад в opensource, ведем блог на хабре. Сейчас запускаем разработку нового BigData хранилища (технологии в процессе определения, но склоняемся к решениям Apache - Spark, Hive, Parquet и другим), внедряем telegram-бота для мониторинга инфраструктуры.

Мы ищем Data Engineer, способного построить аналитическую систему, в которую будет записываться информация обо всех взаимодействиях пользователей с нашими продуктами: сайтом, мобильными и десктопными приложениями. На данный момент работающего решения еще нет. Объем данных – около 150 млн записей в сутки (в начале), дальше – больше. После того, как хранилище будет построено, мы планируем применять различные ML инструменты как для решения задач продуктовой аналитки, так и для, например, противодействия мошенничеству. В области ML у нашей команды уже есть экспертиза, поэтому не страшно, если опыта в этом нет - можно будет прокачаться.

Мы ждем от вас:

— Опыт работы с технологиями стека apache (Impala, Spark, Hive, Hadoop, Parquet) или clickhouse
— Умение строить архитектуры систем хранения и обработки больших данных
— Понимание важности документирования построенного
— Умение использовать ML методы и инструменты, или стремление их изучить и начать применять
— Плюсом будет умение разворачивать ПО непосредственно на серверах, знание DevOps практик (Docker, Ansible)
— Желание развиваться и делать свое дело классно

Что требуется делать:

— Заниматься построением с нуля аналитической системы, основные потребители потребители которой – продуктовые аналитики (технически подкованные, которые могут сами написать SQL-запрос)
— Следить за производительностью системы и, при необходимости, производить её fine tuning
— Общаться с командами, которые будут потребителями построенной системы, выяснение и фиксация требований
— Добавлять модули, которые будут использовать различные ML инструменты для анализа хранящихся данных

Что важно знать о нас:

— Нас около 40 человек. У нас гибкий график, молодая команда и горизонтальная модель управления.
— Мы предоставляем бесплатные обеды, фрукты, кофе, круглосуточный доступ в офис.
— В офисе есть настольный теннис, кухня, телек и диван.
— Работаем на MacBook Pro.

Если вам показалась наша вакансия интересной, напишите в сопроводительном письме информацию о сделанных проектах, ссылку на github, краткий рассказ об используемом стеке и вашей роли в команде.

Ваш отклик
No content.icon.access denied
Авторизуйтесь
Откликаться на вакансии могут только зарегистрированные пользователи.