Senior Data Engineer / Spark Developer

Wrocław, Poland Posted 3d Leaves the board in 4 days
ATS Keyword Match See which key terms from this posting your resume already has. Free.
  • Minimum 4 lata doświadczenia komercyjnego w pracy z Apache Spark.
  • Bardzo dobra znajomość PySpark, Spark SQL, DataFrame API oraz Structured Streaming.
  • Doświadczenie w integracji Apache Spark z MongoDB przy wykorzystaniu MongoDB Spark Connector.
  • Praktyczna znajomość Apache Iceberg oraz zarządzania wersjonowanymi tabelami danych.
  • Doświadczenie w budowie rozwiązań Data Lake lub Data Lakehouse.
  • Dobra znajomość języka Python.
  • Doświadczenie z Jenkins oraz budową pipeline'ów CI/CD.
  • Znajomość narzędzi monitoringu i observability, w szczególności Prometheus oraz Grafana.
  • Doświadczenie w pracy zgodnie z metodykami Agile (Scrum lub Kanban).
  • Praktyczna znajomość Jira i Confluence.
  • Gotowość do pracy z biura 1-2 dni w tygodniu (Wrocław)

Mile widziane

  • Doświadczenie z Delta Lake lub Apache Hudi.
  • Znajomość Kubernetes, Docker oraz Spark Operator.
  • Doświadczenie w pracy z rozwiązaniami OpenTelemetry lub Dynatrace.
  • Znajomość zagadnień Data Quality, Data Governance oraz Data Observability.
  • Doświadczenie w środowiskach chmurowych (Azure, AWS, GCP).

Share your thoughts