Socure строит инфраструктуру доверия к идентичности для цифровой экономики, проверяя 100% хороших идентичностей в реальном времени и предотвращая мошенничество. Мы ищем людей, которые хотят взять на себя ответственность, быстро двигаться, критически мыслить и решать проблемы клиентов с точностью. Если вы хотите помочь построить будущее идентичности с командой, которая ставит высокие стандарты, продолжайте читать.
Мы ищем Senior Data Engineer для нашей команды Data Automation. Вы будете играть ключевую роль в проектировании и создании масштабируемых платформ данных и конвейеров, которые поддерживают продукты и аналитику проверки идентичности Socure.
Обязанности
- Проектировать и строить пакетные и потоковые конвейеры данных для поддержки автоматизированного ввода данных, ML feature engineering и аналитики в различных продуктовых доменах.
- Отвечать за полную доставку сложных, неоднозначных инициатив данных, включая архитектуру, реализацию, тестирование, развертывание, мониторинг и документацию.
- Развивать платформу данных для поддержки крупномасштабной обработки данных с использованием современных облачных технологий.
- Автоматизировать операции с данными (валидация, проверки качества, оповещения, восстановление) для уменьшения ручных усилий и улучшения согласованности.
- Оптимизировать стоимость, производительность и надежность рабочих нагрузок данных.
- Тесно сотрудничать с кросс-функциональными командами (Data Science, Product, Engineering) для понимания требований и их перевода в технические решения.
- Оценивать и внедрять новые технологии для поддержания платформы современной и эффективной.
Требования
- 5+ лет опыта в области инженерии данных, создания и поддержки производственных платформ данных и конвейеров.
- Сильные навыки программирования на языке общего назначения (например, Python или Scala) для обработки данных и SQL для аналитики данных.
- Глубокий опыт работы с распределенными фреймворками обработки данных, такими как Apache Spark, включая настройку и оптимизацию производительности.
- Опыт создания решений для данных с использованием сервисов AWS (EMR, Lambda, s3 и т.д.).
- Сильное понимание концепций моделирования данных и хранилищ данных, включая разбиение и проектирование схем для крупномасштабных наборов данных.
- Опыт эксплуатации и поддержки производственных конвейеров, включая мониторинг, оповещения, реагирование на инциденты и улучшение надежности со временем.
- Твердая основа в практиках программной инженерии, включая контроль версий, CI/CD, стратегии тестирования и код-ревью.
- Сильные навыки коммуникации и сотрудничества, способность эффективно работать как с техническими, так и с нетехническими заинтересованными сторонами.
Предпочтительные квалификации
- Опыт работы с потоковой или почти реальной обработкой данных (Kafka, Kinesis и т.д.).
- Практический опыт работы с инструментами оркестрации данных (Airflow, Step Functions и т.д.).
- Знакомство с современными паттернами платформ данных, такими как Data Lakehouse, Data Mesh и крупномасштабное совместное использование данных между командами.
- Опыт работы с инженерией подсказок, используя современные GenAI, Large Language Models (LLM).
- Опыт наставничества других инженеров и вклада в стандарты и лучшие практики на уровне всей инженерной команды.
Условия
Socure не может предоставить спонсорство сейчас или в будущем для этой роли. Socure является работодателем, предоставляющим равные возможности, и ценит разнообразие во всех его формах в нашей компании. Мы не дискриминируем по признаку расы, религии, цвета кожи, национального происхождения, пола, сексуальной ориентации, возраста, семейного положения, статуса ветерана или инвалидности. Если вам нужна помощь на любом этапе процесса подачи заявки или найма, включая поддержку на собеседовании или при адаптации, пожалуйста, свяжитесь с вашим рекрутером Socure напрямую.
Где предстоит работать
remote
Онлайн: 
Заказ: 
