Инженер платформы Databricks
Мы ищем инженера платформы для проектирования, создания и оптимизации решений по сбору, обработке и хранению данных, которые обеспечивают продвинутую аналитику и трансформацию цифровых процессов.
Местоположение:
Quantori — международная команда: у нас есть коллеги, работающие не только из офиса, но и удаленно со всего мира.
Обязанности:
- Проектировать, создавать и поддерживать масштабируемые конвейеры данных для получения, интеграции и управления данными из различных источников и систем генерации данных (например, лабораторные системы, MES, клинические поставки, системы качества, внешние партнеры).
- Создавать и оптимизировать потоки данных для структурированных и неструктурированных данных с использованием Python (PySpark), R, SQL, Databricks и других современных инженерных инструментов.
- Разрабатывать и поддерживать конкретные репозитории данных, внедряя корпоративные модели данных и создавая новые модели по мере необходимости.
- Обеспечивать готовность к работе с ИИ/МО, гарантируя, что данные хорошо структурированы, версионированы, отслеживаемы и семантически соответствуют корпоративным стандартам данных.
- Тесно общаться с заинтересованными сторонами и другими командами.
Что мы ожидаем:
- Степень бакалавра в области инженерии, науки о данных, естественных наук, информатики или смежной области; предпочтительно ученая степень.
- Более 6 лет опыта в области инженерии данных, включая моделирование данных и проектирование баз данных, желательно в научной, производственной или медицинской среде.
- Глубокое знание платформы Databricks
- Владение Python, SQL и облачными архитектурами (сервисы AWS), а также Spark и dbt.
- Опыт работы с ETL и DWH.
- Опыт работы с NoSQL и графовыми базами данных.
- Владение английским языком на уровне B2+
- Сильные аналитические навыки, навыки решения проблем и управления заинтересованными сторонами, с возможностью преобразовывать обсуждения в действенные требования.
- Способность одновременно вести несколько интересных проектов, обладая сильными организационными навыками и адаптивностью.
Приятно иметь:
- Понимание CI/CD и инструментов инфраструктуры, таких как Terraform.
- Опыт работы с регулируемыми или основанными на стандартах средами данных, такими как CDISC, HL7, FHIR, OMOP, DICOM, или стандартами данных производства/качества.
- Знакомство с высокоразмерными данными (например, изображениями, данными датчиков и т. д.).
- Опыт работы с принципами, связанными с MLOps и рабочими процессами развертывания моделей.
- Знание производственных систем (MES), лабораторных информационных систем или промышленных систем данных.
- Опыт работы с графами знаний или архитектурами, управляемыми онтологиями.
Мы предлагаем:
- Конкурентоспособная оплата
- Удаленная работа
- Гибкий график работы
- Программы непрерывного образования, наставничества и профессионального развития
- Команда с отличной технической экспертизой
Если вы не видите открытой вакансии, соответствующей вашему стеку навыков и/или профессиональному опыту, но заинтересованы в работе с нами — отправьте свое резюме на career@quantori.com. Мы постараемся найти для вас что-то особенное и интересное!
