ITDS leverer IT-tjenester og spesialiserte team til kundenes prosjekter.
Senior PySpark Data Engineer – Big Data & Cloud Integration
Vous développerez et optimiserez des pipelines de données avec PySpark et Spark sur YARN, puis les intégrerez à des environnements cloud, principalement sur GCP. Vous travaillerez avec des data scientists et des ingénieurs pour mettre en production des solutions analytiques. Le poste est basé à Cracovie et propose un modèle de travail hybride.
3× større sjanse for intervju med en uoppfordret e-post
Se den opprinnelige stillingsannonsenInformasjon om ITDS
- Bransje
- IT-tjenester
- Offisielt domene
- itds.pl
- Ledige stillinger
- 171
Stillingsdetaljer
Den fullstendige beskrivelsen publisert av ITDS.
Unleash the power of data — transform experimental insights into scalable, high-performance workflows! Kraków-based opportunity with hybrid work model. As a Senior PySpark Data Engineer, you will be working for our client, a leader in large-scale data engineering and cloud integration. You will play a pivotal role in converting cutting-edge experimental code into robust, production-ready data pipelines, enabling innovative solutions across diverse projects. Join a dynamic environment where your expertise accelerates data-driven decision-making and fosters technological advancement.
Your main responsibilities: Convert experimental code into scalable, efficient workflows and modules. Develop and optimize data pipelines using PySpark and Spark on YARN.
- Collaborate with data scientists and engineers to productionize analytical solutions.
- Ensure code quality, perform performance tuning, and implement best data engineering practices.
- Maintain and improve performance of data workflows in a large-scale environment. Integrate data pipelines within cloud ecosystems, primarily Google Cloud Platform (GCP).
- Support continuous improvement through performance monitoring and optimization. You're ideal for this role if you have: 5+ years of experience in data engineering and PySpark/Spark development. Strong SQL skills and experience with Spark optimization techniques. Hands-on experience with the Hadoop ecosystem, especially Spark on YARN. Knowledge of cloud platforms, preferably GCP, is a strong plus. It is a strong plus if you have: Certifications or additional experience in cloud computing or big data solutions. Language required for the role: English, with a communicative proficiency. Eligibility to work in Europe: Only candidates with an existing legal right to work in the European Union will be considered for this role. #MAKEYourCareerBETTER Interested? Apply now and include your CV (preferably in English) along with a statement confirming your consent to the processing and storage of your personal data.
3× større sjanse for intervju med en uoppfordret e-post
Søk på denne stillingen
Hvordan søker jeg?
Stillingsannonsen er publisert på nettsiden til ITDS. Åpne den opprinnelige stillingsannonsen ↗ for å sende inn søknaden din. Screeningpass fyller ikke ut skjemaet for deg.
Hvem kan du skrive til hos ITDS om denne stillingen?
Start et kontaktsøk fra denne siden. Screeningpass foreslår opptil tre personer knyttet til stillingen. Du velger hvem du vil skrive til, så søker Screeningpass etter personens jobb-e-postadresse og klargjør en melding. Du leser gjennom meldingen og sender den selv med Gmail. En e-postadresse er ikke alltid tilgjengelig, og du er aldri garantert svar.
Hvor mye koster det å finne en kontakt?
Et søk koster 1 kreditt. Du får kreditten tilbake hvis søket mislykkes. Når du registrerer deg, får du 3 kreditter, nok til 3 søk.
Hva kan du bruke Screeningpass til?
Screeningpass samler stillingsannonser for praksisplasser, lærlingplasser og jobber som bedrifter har publisert. For en stilling finner Screeningpass en kontaktperson i bedriften, søker etter personens jobbrelaterte e-postadresse og lager en melding basert på CV-en din. Se hvordan det fungerer i detalj.