Технології
Буде перевагою
Snowflake
Apache Kafka
Apache Airflow
Бажаєте розвинути свої знання у сфері хмарних технологій? Приєднуйтесь до нашого спеціалізованого підрозділу, що об'єднує експертів з обробки та аналізу даних в рамках Центру компетенцій Data & Analytics. Ми також пропонуємо розвиток у сферах Data Science, Big Data та машинного навчання.
Завдання
- Створення та розробка масштабованих, високопродуктивних рішень Data Lake, що працюють в режимі реального часу
- Побудова ETL-пайплайнів для вилучення даних з різних джерел та їх обробки в хмарі
- Моделювання даних та їх обробка відповідно до потреб бізнесу
- Моніторинг рішень та внесення пропозицій щодо вдосконалення
- Збір вимог та пропозиція технологічних рішень
- Підготовка технічної документації
- Тісна співпраця з аналітиками даних
- Підтримка менш досвідчених колег, обмін знаннями та кращими практиками
Наші очікування
- Мінімум 4 роки досвіду роботи в проектах, орієнтованих на обробку великих обсягів даних
- Дуже добре знання мов SQL і Python та інструментів Spark/PySpark
- Досвід побудови та проектування рішень Data Lake та DWH
- Знання процесу ETL та пов'язаних з ним інструментів (SSIS, ADF, IPC)
- Комерційний досвід використання Azure Databricks
- Здатність вільно спілкуватися англійською мовою
- Вільне володіння польською мовою
- Проживання в Польщі є обов'язковим
Буде перевагою
- Досвід роботи в проектах міграції даних з локальної системи в хмару (бази даних: Oracle, PostgreSQL, MS SQL)
Вакансія № 260211-QAKNI
Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.
Technologies & tools
Nice to have
Snowflake
Apache Kafka
Apache Airflow
Want to develop your expertise in cloud technologies? Join our specialized unit of data processing and analysis experts within the Data & Analytics Competence Center. We also offer development in the areas of Data Science, Big Data and Machine Learning.
Your tasks
- Building and developing scalable, real-time and high-performance Data Lake solutions
- Creating ETL pipelines to acquire data from various sources and process it in the cloud
- Data modeling and processing according to business needs
- Monitoring solutions and proposing improvements
- Gathering requirements and proposing technology solutions
- Preparing technical documentation
- Working closely with data analysts
- Supporting less experienced colleagues, sharing knowledge and best practices
Requirements
- Min. 4 years of experience in projects focused on processing high volumes of data
- Very good knowledge of SQL and Python languages and Spark/PySpark tools
- Experience in building and designing Data Lake and DWH solutions
- Knowledge of ETL process and related tools (SSIS, ADF, IPC)
- Commercial experience using Azure Databricks
- Ability to communicate freely in English
- Fluency in Polish required
- Residence in Poland required
Nice to have
- Experience in data migration projects from on-premise to cloud (databases: Oracle, PostgreSQL, MS SQL)
Job no. 260211-QAKNI
Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.