Долучайся до нас Контакти

Sii Ukraine

SII POLAND

SII SWEDEN

Назад

Інженер з обробки даних з GCP (ф/м/х)

  • Regular, 
  • Senior
  • Віддалено, 
  • Гібрид, 
  • Офіс
  • Multiple locations Показати все
This translation is generic and may include errors. Перекласти на English.
This translation is generic and may include errors. Перекласти на Ukrainian.

Технології

Бажаєте розвиватися у сфері хмарних технологій та працювати з реальними даними? Приєднуйтесь до нашої команди Data & Analytics, де ми створюємо та розробляємо рішення на основі GCP. Працюйте з експертами, розвивайтеся в Data Engineering, Big Data або Machine Learning та робіть реальний вплив на проекти.

Завдання

  • Проектування, впровадження та підтримка масштабованих конвеєрів даних на базі Google Cloud Platform
  • Робота з BigQuery як основним сховищем даних: моделювання даних, оптимізація запитів і витрат, турбота про продуктивність і надійність рішень
  • Інтеграція даних з різних джерел (файли, бази даних, API, події) та їх обробка і трансформація
  • Оркестрування робочих потоків даних за допомогою Apache Airflow / Cloud Composer
  • Створення та підтримка CI/CD рішень для конвеєрів даних та інфраструктури
  • Управління інфраструктурою в хмарі відповідно до підходу Infrastructure as Code (Terraform)
  • Забезпечення якості даних, моніторингу конвеєрів та швидкого реагування на інциденти
  • Співпраця з аналітиками, BI та продуктовими командами для отримання стабільних та добре задокументованих даних
  • Брати участь у розробці архітектури даних та спільно визначати належні практики інженерії даних

Наші очікування

  • Мінімум 4 роки досвіду роботи на посаді Data Engineer або на аналогічній посаді, що працює з даними у виробничому середовищі
  • Дуже добре знання Google Cloud Platform, зокрема: BigQuery (моделювання даних, оптимізація запитів) та Cloud Storage
  • Вміння проектувати, будувати та підтримувати конвеєри даних (пакетні та/або потокові)
  • Дуже добре знання SQL та Python в контексті обробки та оркестрування даних
  • Досвід в області оркестрування робочих процесів (Apache Airflow / Cloud Composer)
  • Практика впровадження CI/CD для рішень для обробки даних, наприклад, GitHub Actions, GitLab CI, Cloud Build
  • Знайомство з підходом "Інфраструктура як код", з акцентом на Terraform
  • Попередня робота з великими обсягами даних з акцентом на продуктивність і надійність рішення
  • Вільне спілкування англійською мовою
  • Обов'язкове проживання та вільне володіння польською мовою

Буде перевагою

  • Практичний досвід обробки потокових даних (наприклад, Dataflow / Apache Beam, Pub/Sub)
  • Володіння Apache Spark / PySpark при роботі з великими обсягами даних
  • Компетентність у перетворенні та моделюванні даних за допомогою таких інструментів, як dbt
  • Вміння працювати з різними платформами даних (наприклад, Databricks, Snowflake, MS Fabric)
  • Орієнтація в інструментах та передових практиках у сфері управління даними, управління даними та якості даних

Вакансія № 260608-BJIV2

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Technologies & tools

Do you want to grow in cloud technologies and work on real data? Join our Data & Analytics team, where we build and develop GCP-based solutions. Work with experts, grow in Data Engineering, Big Data or Machine Learning and have a real impact on projects.

Your tasks

  • Designing, implementing and maintaining scalable data pipelines based on Google Cloud Platform
  • Working with BigQuery as the main data warehouse: modeling data, optimizing queries and costs, taking care of performance and reliability of solutions
  • Integrating data from various sources (files, databases, APIs, events) and their processing and transformation
  • Orchestrating data workflows using Apache Airflow / Cloud Composer
  • Creating and maintaining CI/CD solutions for data pipelines and infrastructure
  • Managing cloud infrastructure according to Infrastructure as Code (Terraform) approach
  • Ensure data quality, pipeline monitoring and rapid incident response
  • Collaborate with analytics, BI and product teams to deliver stable and well-documented data
  • Participate in the development of data architecture and jointly define good data engineering practices

Requirements

  • Min. 4 years of experience as a Data Engineer or in a similar position working with data in a production environment
  • Very good knowledge of Google Cloud Platform, in particular: BigQuery (data modeling, query optimization) and Cloud Storage
  • Ability to design, build and maintain data pipelines (batch and/or streaming)
  • Very good knowledge of SQL and Python in the context of data processing and orchestration
  • Experience in the area of workflow orchestration (Apache Airflow / Cloud Composer)
  • Practice in CI/CD implementation for data solutions, e.g. GitHub Actions, GitLab CI, Cloud Build
  • Familiarity with the Infrastructure as Code approach, with an emphasis on Terraform
  • Previous work with large volumes of data, with a focus on solution performance and reliability
  • Fluent communication skills in English
  • Residence in Poland required and fluency in the Polish language

Nice to have

  • Hands-on experience with streaming data processing (e.g. Dataflow / Apache Beam, Pub/Sub)
  • Proficiency in Apache Spark / PySpark when working with large volumes of data
  • Expertise in data transformation and modeling using tools such as dbt
  • Ability to work with a variety of data platforms (e.g. Databricks, Snowflake, MS Fabric)
  • Orientation in tools and best practices in the areas of Data Governance, Data Lineage and Data Quality

Job no. 260608-BJIV2

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Відгукнутися миттєво

Fill in the form in English please

Інженер з обробки даних з GCP (ф/м/х)

Формат роботи*

Choose at least one option

Варіант не обрано

angle-down

Варіант не обрано

Прикріпити резюме*

Завантажений файл:
  • file_icon Created with Sketch.

Допустимі файли: .doc, .docx, .pdf (максимум 5 МБ)
Надішліть файл у форматі PDF, DOCX або DOC
Розмір завантаження обмежений 5 МБ
Файл не доданий
Не вдалося завантажити файл

Ви можете у будь-який час відкликати свою згоду на обробку персональних даних, але таке відкликання не вплине на законність будь-якої обробки таких даних, яка була здійснена до моменту відкликання вашої згоди. Детальна інформація про обробку ваших персональних даних зазначена в Політиці конфіденційності.

Sii Poland дотримується Процедури інформування про порушення законодавства.

Створіть обліковий запис MySii, щоб стежити за статусом вашого процесу
success

Ваша заявка була успішно надіслана

Ми зв'яжемося з вами, як тільки переглянемо ваше резюме

Опрацювання

Вибачте, щось пішло не так і ваше повідомлення не було доставлене

Оновіть сторінку та спробуйте ще раз. Зв'яжіться з нами, якщо проблема виникне знову

На жаль, вибраний файл, ймовірно, пошкоджений. Ми не можемо його обробити.

Спробуйте завантажити іншу копію або нову версію файлу. Зверніться до нас, якщо проблема повториться.

Бенефіти для тебе

Відгукнутися зараз Рекомендувати друга

Änderungen im Gange

Wir aktualisieren unsere deutsche Website. Wenn Sie die Sprache wechseln, wird Ihnen die vorherige Version angezeigt.

This content is available only in English version.

Are you sure you want to leave this page?

This content is available only in English version.

Are you sure you want to leave this page?