Старший инженер платформ данных в Португалии

Международная медицинская ИТ-корпорация Sword Health, первопроходец в сфере создания искусственного интеллекта для клинического лечения и цифровой терапии, открывает конкурс на позицию старшего инженера платформ данных (Data Platform Engineer) для полностью удаленной работы на территории Португалии. Основной стек задач сфокусирован на проектировании и развитии потокового озера данных (streaming lakehouse) на базе форматов Iceberg/Delta Lake и распределенного движка Flink/Spark. Позиция требует продуктового мышления в отношении инфраструктуры, создания отказоустойчивых API-интерфейсов для самообслуживания внутренних аналитических систем, интеграции распределенных брокеров Kafka и построения AI-ready дата-пайплайнов в условиях строгой регуляторики медицинских данных.

• Официальный контракт на полную занятость в инновационном ИТ-гиганте в формате Teletrabalho.
• Высокий уровень базового оклада, дополненный корпоративными опционами и долями компании (Equity shares).
• Ежемесячная компенсация расходов на организацию удаленного рабочего места (Remote work allowance).
• Предоставление ежедневного пособия на питание (Meal allowance) в соответствии со стандартами Португалии.
• Комплексное медицинское страхование, включая стоматологию и офтальмологию (Health, dental and vision insurance).
• Гибкий график работы и предоставление дискреционного отпуска (Discretionary vacation) по согласованию.

• Проектирование, масштабирование и эволюция streaming lakehouse архитектуры для внутренних потребителей данных.
• Построение и эксплуатация высоконадежных распределенных потоковых конвейеров с минимальной задержкой (low-latency).
• Разработка отказоустойчивых рабочих процессов для координации сложных перемещений данных на базе Temporal или Restate.
• Формирование и поддержка API-поверхности платформы (REST, gRPC) с контролем версионирования, рейлимитов и трассировки.
• Экспертная оценка, тестирование и интеграция сторонних вендорных платформ данных (Snowflake, Databricks).
• Развертывание AI-ready инфраструктуры для нужд машинного обучения и генеративных продуктов компании.
• Управление контрактами данных, политиками управления (governance) и сквозного отслеживания происхождения данных (lineage).

• Подтвержденный практический опыт проектирования и эксплуатации платформ данных промышленного масштаба.
• Глубокое понимание табличных форматов данных (Iceberg, Delta Lake) на уровне метаструктур, манифестов и компакции.
• Уверенное знание каталогов данных (REST, Polaris, Glue, Unity) и принципов отделения вычислений от хранения.
• Опыт работы с распределенными движками обработки данных Flink или Spark на уровне тонкой отладки заданий.
• Практический опыт построения событийно-ориентированных архитектур с использованием Apache Kafka.
• Опыт работы в регулируемых средах (HIPAA, SOC 2, FedRAMP) с жестким аудитом безопасности данных.
• Свободный технический английский язык (уровень B2/C1) для ведения проектной документации.

• Владение стеком наблюдаемости (Prometheus, Grafana, OpenTelemetry) и опыт работы с dbt/DataHub рассматриваются как преимущество.
• Релокационная помощь (Relocation assistance) не предоставляется; соискатель должен иметь действующие документы ЕС.