Big Data Developer

Big Data Developer

  • Department icon
    Data engineering & ML
  • Experience icon
    Mid
  • Location icon
    Zdalnie
Apply now

About the role

Projekt realizowany dla instytucji odpowiedzialnej za rozwój i utrzymanie systemów informatycznych wspierających funkcjonowanie ochrony zdrowia w Polsce.

Our expectations

  • Min. 2-letnie doświadczenie na stanowisku związanym z przetwarzaniem dużych zbiorów danych jako programista
  • Doświadczenie projektowe w przetwarzaniu dużych zbiorów danych
  • Doświadczenie projektowe w programowaniu w języku Python
  • Doświadczenie projektowe w środowisku obliczeniowym on-premise
  • Doświadczenie w programowaniu w środowisku Apache Spark
  • Doświadczenie w programowaniu w Apache Airflow
  • Doświadczenie w programowaniu w SQL
  • Znajomość zagadnień Hadoop
  • Doświadczenie w programowaniu procesów ELT/ETL
  • Znajomość zagadnień związanych z procesami CI/CD
  • Umiejętność korzystania z systemu kontroli wersji (Git)
  • Dobra organizacja pracy własnej, orientacja na realizacje celów
  • Umiejętności interpersonalne i organizacyjne, planowanie
  • Komunikatywność, kreatywność, samodzielność, kultura osobista i dociekliwość
  • Zdolność adaptacji i elastyczność, otwartość na stały rozwój i gotowość uczenia się

Nice to have

  • Doświadczenie projektowe w obszarze ochrony zdrowia
  • Doświadczenie projektowe w obszarze Hurtownia Danych
  • Certyfikat z obszaru zarządzania projektem metodą zwinną (np.. Agile PM lub równoważny)
  • Certyfikat potwierdzający znajomość Apache Airflow (np. Airflow Fundamentals lub równoważny)
  • Certyfikat potwierdzający umiejętność tworzenia DAGów Airflow (np. Dag Authoring lub równoważny)
  • Certyfikat potwierdzający znajomość Apache Spark (np. Spark Developer Associate lub równoważny)
  • Certyfikat potwierdzający znajomość SQL (np.. W3Schools SQL Certificate lub równoważny)

Main responsibilities

  • Projektowanie, implementacja i utrzymanie rozwiązań do przetwarzania dużych zbiorów danych z wykorzystaniem języka Python oraz SQL
  • Realizacja projektów w środowiskach obliczeniowych on-premise z wykorzystaniem Apache Spark i Apache Airflow
  • Budowa i rozwój procesów integracji danych w modelu ETL/ELT
  • Przetwarzanie danych w środowiskach opartych o technologię Hadoop
  • Tworzenie i utrzymywanie wydajnych pipeline’ów danych oraz automatyzacja zadań przetwarzania danych
  • Wdrażanie rozwiązań zgodnych z praktykami CI/CD oraz praca z systemem kontroli wersji Git
  • Współpraca z zespołami projektowymi w celu realizacji celów biznesowych związanych z analizą i przetwarzaniem danych
  • Planowanie i organizacja własnej pracy w sposób umożliwiający realizację zadań zgodnie z harmonogramem
  • Aktywne rozwiązywanie problemów, analiza danych oraz usprawnianie istniejących procesów
  • Ciągłe poszerzanie wiedzy technicznej i gotowość do nauki nowych technologii oraz narzędzi

What we offer

Unique atmosphere

Unique atmosphere

A good and friendly atmosphere in the company and the satisfaction of working with both departmental colleagues and direct superiors.

Team-building events

Team-building events

Large internal technology conferences, star parties and team outings.

Flexibility

Flexibility

Working hours are flexible and tailored to individual preferences. As is the mode of work delivery: remotely or in a hybrid model.

Development paths

Development paths

They are clear, straightforward and certainly not bumpy. Choose between a managerial or expert development path.

Certifications

Certifications

We facilitate the development of desired competencies, subsidize training and courses.

Security

Security

We have many years of experience in the market and implement national and international projects. We skillfully manage tasks and enable smooth allocation between projects.

Language lessons

Language lessons

For those who speak fluently and want to maintain this level or wish to develop their language skills, we enable free participation in language lessons. Are conducted in the modern and safe form of online meetings. Just learn IT!

Comfort at work

Comfort at work

Attractively decorated relaxation areas, available in the company's largest branches, to encourage relaxation during the day, and equipped kitchens with aromatic coffee.

Support for activity

Support for activity

We have soccer teams, we play championships, we have marathon runners and other active sports lovers on board. We support all passions.

Apply Recommend

The first step to #BriteTeam

Icon chevron down
Icon paperclip

Max. 10MB, .pdf|.doc|.docx

Recommend your friend

Your contact details


Details of recommended friend

Icon chevron down
Icon paperclip

Max. 10MB, .pdf|.doc|.docx

Krystyna Biernat