Senior Data Engineer (Redshift) - удалённая вакансия

Welltech ищет специалиста на позицию Senior Data Engineer (Redshift): уровень senior, то есть решения вы принимаете сами. Вакансия относится к направлению Данные и аналитика и полностью удалённая. Компания не ограничивает местоположение кандидата, поэтому подать заявку можно откуда угодно.

Работодатель не указал сумму публично, это уточняется на собеседовании. Условий по рабочим часам объявление не ставит.

Эта вакансия прошла автоматическую проверку: в список не попадают объявления, где требуется иностранное разрешение на работу, спонсорство визы, гражданство определённой страны или проживание в ней.

Обзор компании Welltech является мировым лидером в области оздоровительных технологий, происходящих из Украины. Наша миссия состоит в том, чтобы внедрять инновации и расширять наше портфолио оздоровительных приложений, используя передовые, технологически ориентированные маркетинговые стратегии. С более чем 25,5 миллионами пользователей по всему миру наши флагманские приложения - Muscle Booster, Yoga-Go и Walk Фит — помогает людям сформировать более здоровые привычки, улучшить свою физическую форму и улучшить свое ежедневное благополучие. Каждая подписка означает значительные изменения в чьей-то жизни, и мы стремимся поддержать это путешествие.

Местоположение и команда Базируясь на Кипре, с дополнительными командами в Украине, Польше, Испании и Великобритании, мы объединяем масштаб лидера рынка со страстью стартапа. Наша разнообразная, квалифицированная команда из более чем 500 специалистов стимулирует рост и инновации.

Роль и обязанности Как старший инженер по обработке данных, вы будете играть ключевую роль в создании и поддержании основы нашей инфраструктуры данных. Работая в тесном сотрудничестве с инженерами данных, аналитиками и командами продуктов, вы будете разрабатывать и оптимизировать надежные, масштабируемые конвейеры данных и модели. Ваш вклад значительно повлияет на нашу способность предоставлять информацию, функции продуктов питания и принимать решения, основанные на данных, во всей организации. Эта позиция идеально подходит для тех, кто сочетает технический опыт с дальновидным подходом и процветает в совместной среде.

Ключевые обязанности: Разработка и оптимизация трубопроводов: проектирование и поддержание эффективных трубопроводов ETL / ELT с использованием современных инструментов и лучших практик для обеспечения плавного потока данных для аналитики. Моделирование и трансформация данных: создание эффективных моделей данных, отвечающих потребностям бизнеса, поддерживающих высококачественную отчетность и аналитику. Межкомандное сотрудничество: партнерство с аналитиками данных, менеджерами по продуктам и другими инженерами для понимания требований к данным и предоставления решений, соответствующих бизнес-целям. Обеспечение качества данных: установление и обеспечение контроля качества данных, валидационных рамок и мониторинга для обеспечения согласованности, точности и надежности данных. Оптимизация производительности: выявление и устранение узких мест производительности в трубопроводах, запросах и хранении данных, а также внедрение оптимизации для повышения скорости и надежности. Безопасность и соблюдение: Следуйте передовым методам обеспечения безопасности данных и убедитесь, что конвейеры данных построены в соответствии со стандартами конфиденциальности и соответствия. Инновации и совершенствование: экспериментирование с новыми инструментами и методологиями с помощью Proof of Concepts (PoCs) и бенчмаркинга производительности для поиска лучших решений. Автоматизация и CI/CD: Способствовать разработке надежных трубопроводов CI/CD (GitLab CI или аналогичных) для рабочих процессов данных, поддерживая автоматизированное тестирование и развертывание.

Необходимые навыки Не менее 4 лет опыта в области разработки данных или разработки бэкэндов, с сильным акцентом на конвейеры данных производственного уровня. 2-3 года опыта работы с сервисами AWS, при этом администрирование Redshift является обязательным. - Знание сервисов AWS, включая Spectrum, S3, RDS, Glue, Lambda, Kinesis и SQS. Сильные навыки в Python и SQL для преобразования и автоматизации данных. Опыт работы с dbt для моделирования и преобразования данных. Понимание стриминговых архитектур и микро-обработки для потребностей данных в режиме реального времени. Опыт работы с конвейерами CI/CD для рабочих процессов данных (предпочтительно GitLab CI). Знакомство с инструментами проверки схемы событий, такими как Snowplow или реестр схем. Отличная способность к общению и сотрудничеству. Навыки решения проблем — способность анализировать проблемы данных, предлагать решения и предоставлять надежные результаты. Мышление роста — энтузиазм в отношении изучения новых инструментов, обмена знаниями и улучшения практики команды.

Стек технологий - Облако: AWS (Redshift, Spectrum, S3, RDS, Lambda, Kinesis, SQS, Glue, MWAA) Языки: Python, SQL Оркестрация: Airflow (MWAA) - Моделирование: dbt - CI/CD: GitLab CI (включая администрирование GitLab) Мониторинг: Datadog, Grafana, Graylog Процесс валидации событий: реестр схем Iglu API и интеграция: REST, OAuth, веб-хук - Infra-as-code (необязательно): Terraform

Бонусные баллы Опыт работы с дополнительными сервисами AWS, такими как EMR, EKS, Athena, EC2. Практические знания об альтернативных хранилищах данных, таких как Snowflake. Опыт работы с PySpark для обработки больших данных. Знакомство с инструментами сбора данных о событиях, такими как Snowplow или RudderStack. Интерес или воздействие на платформы данных клиентов (CDP) и рабочие процессы данных в режиме реального времени.

Кандидат в путешествие ui Звонок рекрутера the the Техническое интервью с менеджером по найму the the Встречайте будущих заинтересованных сторон

Исследуйте нашу продукцию: - Мышечный бустер - [https://musclebooster.fitness/](https://musclebooster.fitness/) - Йога-Го - [https://yoga-go.io/] (https://yoga-go.io/) - WalkFit - [http://walkfit.pro] (http://walkfit.pro)

Для получения дополнительной информации посетите [http://welltech.com](http://welltech.com) или обратитесь непосредственно к [https://weworkremotely.com/remote-jobs/welltech-senior-data-engineer-redshift](https://weworkremotely.com/remote-jobs/welltech-senior-data-engineer-redshift)