ITDS świadczy usługi IT i zapewnia wyspecjalizowane zespoły do projektów swoich klientów.
Senior PySpark Data Engineer – Big Data & Cloud Integration
Będziesz rozwijać i optymalizować potoki danych przy użyciu PySpark i Spark na YARN, a następnie integrować je ze środowiskami chmurowymi, głównie GCP. Będziesz współpracować z naukowcami zajmującymi się danymi i inżynierami przy wdrażaniu rozwiązań analitycznych do produkcji. Stanowisko znajduje się w Krakowie i oferuje hybrydowy model pracy.
3× plus de chances d’entretien avec un cold email
Zobacz oryginalną ofertęInformacje o ITDS
- Oficjalna domena
- itds.pl
- Aktualne oferty
- 157
Szczegóły oferty
Pełny opis opublikowany przez ITDS.
Unleash the power of data — transform experimental insights into scalable, high-performance workflows! Kraków-based opportunity with hybrid work model. As a Senior PySpark Data Engineer, you will be working for our client, a leader in large-scale data engineering and cloud integration. You will play a pivotal role in converting cutting-edge experimental code into robust, production-ready data pipelines, enabling innovative solutions across diverse projects. Join a dynamic environment where your expertise accelerates data-driven decision-making and fosters technological advancement.
Your main responsibilities: Convert experimental code into scalable, efficient workflows and modules. Develop and optimize data pipelines using PySpark and Spark on YARN.
- Collaborate with data scientists and engineers to productionize analytical solutions.
- Ensure code quality, perform performance tuning, and implement best data engineering practices.
- Maintain and improve performance of data workflows in a large-scale environment. Integrate data pipelines within cloud ecosystems, primarily Google Cloud Platform (GCP).
- Support continuous improvement through performance monitoring and optimization. You're ideal for this role if you have: 5+ years of experience in data engineering and PySpark/Spark development. Strong SQL skills and experience with Spark optimization techniques. Hands-on experience with the Hadoop ecosystem, especially Spark on YARN. Knowledge of cloud platforms, preferably GCP, is a strong plus. It is a strong plus if you have: Certifications or additional experience in cloud computing or big data solutions. Language required for the role: English, with a communicative proficiency. Eligibility to work in Europe: Only candidates with an existing legal right to work in the European Union will be considered for this role. #MAKEYourCareerBETTER Interested? Apply now and include your CV (preferably in English) along with a statement confirming your consent to the processing and storage of your personal data.
Aplikuj na tę ofertę
Jak aplikować?
Oferta jest opublikowana na stronie ITDS. Otwórz oryginalną ofertę ↗ aby wysłać aplikację. Screeningpass nie wypełnia formularza za Ciebie.
Do kogo w ITDS napisać w sprawie tego stanowiska?
Rozpocznij wyszukiwanie kontaktu na tej stronie. Screeningpass zaproponuje Ci maksymalnie trzy osoby związane ze stanowiskiem. Wybierz osobę, do której chcesz napisać, a Screeningpass poszuka jej służbowego adresu e-mail i przygotuje wiadomość. Sprawdź ją i wyślij samodzielnie przez Gmail. Adres e-mail nie zawsze jest dostępny i nigdy nie ma gwarancji odpowiedzi.
Ile kosztuje wyszukanie kontaktu?
Jedno wyszukiwanie kosztuje 1 kredyt. Jeśli wyszukiwanie się nie powiedzie, kredyt wróci na Twoje konto. Za rejestrację otrzymasz 3 kredyty, czyli 3 wyszukiwania.
Do czego służy Screeningpass?
Screeningpass zbiera publikowane przez firmy oferty staży, kształcenia dualnego i pracy. Dla danej oferty Screeningpass znajduje osobę do kontaktu w firmie, szuka jej służbowego adresu e-mail i przygotowuje wiadomość na podstawie Twojego CV. Zobacz szczegółowo, jak to działa.