#15833 | 2020-02-17 Warszawa, Poland

Data Engineer with Scala

PROJECT INFORMATION:
  • Industry: Banking
  • Type of project: System development
  • Details: anti money laundering system
  • Location: Warsaw, remotely
  • Business trips: No
  • Remote work: even 100%
  • Project language: English (required), Polish (good to have)
  • Team consists of Polish and Duch developers
  • Remuneration: 120 - 160 PLN/H + VAT
  • Project length: until the end of the year
  • Start: ASAP
  • Assignment type: B2B

PROJECT ROLE:
  • System development

REQUIREMENTS:
  • Great programming skills in a statically typed language, e.g. Scala.
  • Hands-on experience managing and further developing distributed systems and clusters for both batch as well as streaming data (S3/Spark and/or Kafka/Flink).
  • Knowledge of data manipulation and transformation.
  • Hands-on experience building complex data pipelines.
  • Great skills in interpreted languages, e.g. Python.
  • Experience in setting up both SQL as well as noSQL databases.
  • Deployment and provisioning automation tools e.g. Docker, Kubernetes, Openshift, CI/CD.
  • Bash scripting and Linux systems administration.
  • Security, authentication and authorisation (LDAP / Kerberos / PAM).
  • Affinity with Advanced Analytics, Data Science.
  • Other programming languages: scripting (Ruby, Groovy, …) or statically typed languages (Java, C++, Go, …).

TECHNOLOGY STACK:

Execution:
  • Docker / Kubernetes / Openshift
Processing:
  • Apache Spark
  • Apache Flink
  • Apache Airflow
Storage:
  • Ceph (S3)
  • Apache Kafka
  • PostgreSQL
  • Apache Cassandra (and other noSQL DBs)
  • Apache Druid
  • Apache Avro
  • Apache Parquet
Programming:
  • Scala/Java
  • Python
  • ReactJS
Data Security and Lineage:
  • Apache Atlas
  • Apache Ranger


WE OFFER:
  • Challenging projects.
  • International atmosphere.
  • Transparently built relations based on trust and fair play.
  • Benefits: Medicover card, Multisport card.
  • Great training and education opportunities.


Work location: Warszawa, Poland
Requirements: Min. 5 years of professional IT experience.
Job type: Freelance

Projekt zamknięty

Przepraszamy, już nie poszukujemy konsultantów do tego projektu.

Przejdź do zakładki ”Bieżące projekty”, aby zobaczyć listę aktualnych propozycji.

Jeżeli jesteś naszym potencjalnym klientem i poszukujesz tego typu konsultantów, użyj naszego formularza "Przejrzyj CV konsultanta".

ProData Consult przechowuje dane w przeglądarce / urządzeniu za pomocą plików cookie w celu zbierania statystyk i optymalizacji naszych stron internetowych oraz opcjonalnie w reklamach kierowanych. Akceptując, wyrażasz zgodę na wykorzystanie plików cookie. Przeczytaj naszą Politykę prywatności, aby uzyskać więcej informacji. Zawsze możesz wycofać swoją zgodę tutaj: Polityka prywatności & pliki cookies

Strona wymaga użycia "Niezbędnych plików cookie". Nasze niezbędne pliki cookie są wykorzystywane wyłącznie w celu zapewnienia funkcjonowania strony i usługi internetowej.

Wybrane usługi stron trzecich mogą przechowywać pliki cookie w celu umieszczania kierowanych reklam, które