Долучайся до нас Контакти

Sii Ukraine

SII POLAND

SII SWEDEN

Назад

Інженер з обробки даних - Data Lake (ф/ж/чол)

  • Senior
  • Віддалено, 
  • Гібрид, 
  • Офіс
  • Multiple locations Показати все
This translation is generic and may include errors. Показати оригінал тексту
Базовою мовою цієї вакансії є English. Перекласти на Ukrainian.

Технології

Ви приєднаєтесь до міжнародного проекту в галузі охорони здоров'я та наук про життя, спрямованого на створення та розвиток сучасної платформи Data Lake, що підтримує великомасштабну обробку та аналітику даних. Рішення дозволяє приймати рішення на основі даних у високорегульованому середовищі, приділяючи особливу увагу якості, безпеці та дотриманню нормативних вимог. Середовище базується на хмарних технологіях і використовує сучасні технології великих даних та найкращі інженерні практики.

Як Data Engineer, ви будете відповідати за проектування, розробку та підтримку конвеєрів даних та архітектури Data Lake. Ви тісно співпрацюватимете з міжфункціональними командами, включаючи аналітиків даних та бізнес-стейкхолдерів, щоб створювати надійні та ефективні рішення для роботи з даними.

Завдання

  • Проектування та розробка масштабованих конвеєрів даних для пакетної обробки даних в реальному часі
  • Побудова та оптимізація архітектури Data Lake для аналітичних задач
  • Інтеграція декількох джерел даних і забезпечення безперебійного потоку даних між системами
  • Забезпечення якості, узгодженості та управління даними (лінійка даних, контроль доступу)
  • Оптимізація продуктивності зберігання та обробки даних з використанням сучасних форматів даних і стратегій розбиття на розділи
  • Моніторинг, усунення несправностей та підвищення продуктивності конвеєра даних
  • Співпраця із зацікавленими сторонами для перетворення бізнес-потреб у технічні рішення
  • Дотримання кращих практик в області інженерії даних і постійне вдосконалення платформи

Наші очікування

  • Значний досвід роботи в галузі інженерії даних або на посадах, пов'язаних з великими даними
  • Знання Python, Scala або Java
  • Практичний досвід роботи з такими інструментами, як Apache Spark, PySpark або подібними фреймворками
  • Попередня робота з технологіями Data Lake (наприклад, AWS S3, Azure Data Lake, Databricks, BigQuery)
  • Знання процесів ETL/ELT та інструментів оркестрування (наприклад, Airflow, Data Factory)
  • Хороше розуміння SQL та моделювання даних
  • Досвід роботи з розподіленими системами та великомасштабною обробкою даних
  • Знання Docker та Kubernetes
  • Сильні аналітичні навички та навички вирішення проблем
  • Вільне володіння польською мовою
  • Проживання в Польщі є обов'язковим

Буде перевагою

  • Досвід роботи з потоковими технологіями (наприклад, Kafka)
  • Знання інструментів управління даними
  • Знання процесів CI/CD у проєктах з даними

Вакансія № 260317-WP4AV

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Technologies & tools

You will join an international project within the healthcare and life sciences industry, focused on building and evolving a modern Data Lake platform supporting large-scale data processing and analytics. The solution enables data-driven decision-making in a highly regulated environment, with a strong emphasis on data quality, security, and compliance. The environment is cloud-based and leverages modern big data technologies and best engineering practices.

As a Data Engineer, you will be responsible for designing, developing, and maintaining data pipelines and Data Lake architecture. You will work closely with cross-functional teams, including data scientists and business stakeholders, to deliver reliable and efficient data solutions.

Your tasks

  • Designing and developing scalable data pipelines for batch and real-time data processing
  • Building and optimizing Data Lake architecture for analytical use cases
  • Integrating multiple data sources and ensuring seamless data flow across systems
  • Ensuring data quality, consistency, and governance (data lineage, access control)
  • Optimizing storage and processing performance using modern data formats and partitioning strategies
  • Monitoring, troubleshooting, and improving data pipeline performance
  • Collaborating with stakeholders to translate business needs into technical solutions
  • Following best practices in data engineering and continuously improving the platform

Requirements

  • Strong experience in Data Engineering or Big Data-related roles
  • Proficiency in Python, Scala, or Java
  • Hands-on experience with tools such as Apache Spark, PySpark, or similar frameworks
  • Previous work with Data Lake technologies (e.g., AWS S3, Azure Data Lake, Databricks, BigQuery)
  • Knowledge of ETL/ELT processes and orchestration tools (e.g., Airflow, Data Factory)
  • Good understanding of SQL and data modeling
  • Experience with distributed systems and large-scale data processing
  • Familiarity with Docker and Kubernetes
  • Strong analytical and problem-solving skills
  • Fluent in Polish required
  • Residing in Poland required

Nice to have

  • Experience with streaming technologies (e.g., Kafka)
  • Knowledge of data governance tools
  • Familiarity with CI/CD processes in data projects

Job no. 260317-WP4AV

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Відгукнутися миттєво

Fill in the form in English please

Інженер з обробки даних - Data Lake (ф/ж/чол)

Формат роботи*

Choose at least one option

Варіант не обрано

angle-down

Варіант не обрано

Прикріпити резюме*

Завантажений файл:
  • file_icon Created with Sketch.

Допустимі файли: .doc, .docx, .pdf (максимум 5 МБ)
Надішліть файл у форматі PDF, DOCX або DOC
Розмір завантаження обмежений 5 МБ
Файл не доданий
Не вдалося завантажити файл

Ви можете у будь-який час відкликати свою згоду на обробку персональних даних, але таке відкликання не вплине на законність будь-якої обробки таких даних, яка була здійснена до моменту відкликання вашої згоди. Детальна інформація про обробку ваших персональних даних зазначена вПолітиці конфіденційності.

Sii Poland дотримується Процедури інформування про порушення законодавства.

Створіть обліковий запис MySii, щоб стежити за статусом вашого процесу
success

Ваша заявка була успішно надіслана

Ми зв'яжемося з вами, як тільки переглянемо ваше резюме

Опрацювання

Вибачте, щось пішло не так і ваше повідомлення не було доставлене

Оновіть сторінку та спробуйте ще раз. Зв'яжіться з нами, якщо проблема виникне знову

На жаль, вибраний файл, ймовірно, пошкоджений. Ми не можемо його обробити.

Спробуйте завантажити іншу копію або нову версію файлу. Зверніться до нас, якщо проблема повториться.

Бенефіти для тебе

Шукаєте щось інше?

У нас є більше пропозицій

Відгукнутися зараз Рекомендувати друга

Änderungen im Gange

Wir aktualisieren unsere deutsche Website. Wenn Sie die Sprache wechseln, wird Ihnen die vorherige Version angezeigt.

This content is available only in English version.

Are you sure you want to leave this page?

This content is available only in English version.

Are you sure you want to leave this page?