About us
ALGOTEQUE to firma konsultingowa z branży IT, która wspiera startupy, średnie przedsiębiorstwa oraz duże korporacje w tworzeniu i dostarczaniu innowacyjnych technologii. Nasz zespół ma udokumentowane sukcesy w projektowaniu, rozwijaniu, wdrażaniu i integracji rozwiązań programistycznych (AI, ML, BI, Web, Automatyzacja) dla sektorów takich jak Telekomunikacja, Energetyka, Bankowość, Ubezpieczenia, Farmacja, Motoryzacja, Przemysł, e-commerce. Świadczymy nasze usługi zarówno w modelu fixed-price, jak i time-and-materials, pomagając naszym klientom w osiąganiu ich celów biznesowych i strategii IT.
Dołącz do naszego zespołu jako ETL Developer/Data Engineer i pracuj nad zaawansowanymi procesami integracji danych zarówno w środowisku on-prem, jak i w chmurze GCP. Poszukujemy doświadczonego specjalisty, który będzie odpowiedzialny za projektowanie, rozwój i optymalizację procesów ETL oraz baz danych w wymagających warunkach wydajnościowych.
Job Description
- Rozwój i utrzymanie procesów ETL w środowisku on-prem przy użyciu narzędzi takich jak Informatica PowerCenter oraz Apache NiFi.
Projektowanie, budowa oraz tuning relacyjnych baz danych (Oracle, PostgreSQL, ScyllaDB)
- Utrzymanie oraz rozwój harmonogramowania procesów z wykorzystaniem narzędzia Automate Now
- Tworzenie i zarządzanie usługami REST API
- Wdrażanie procesów integracji danych w środowisku Google Cloud Platform (GCP) przy użyciu narzędzi takich jak Apache AirFlow, GCP DataFlow, GCP DataProc
- Projektowanie i optymalizacja baz danych w chmurze (GCP BigQuery, GCP BigTable, Scylla Cloud)
- Implementacja i obsługa systemów kolejkowania danych (Kafka, GCP Pub/Sub)
- Programowanie w Pythonie (w obszarze integracji i analizy danych) oraz znajomość PySpark
- Tworzenie wydajnych narzędzi i frameworków wspomagających ładowanie danych w języku Rust
Required qualifications
- Minimum 5-letnie doświadczenie w roli ETL Developera w środowisku on-prem
- Co najmniej 3-letnie doświadczenie jako Data Engineer w środowisku GCP
- Biegła znajomość narzędzi ETL na poziomie zaawansowanym, zarówno on-prem, jak i w chmurze
- Doświadczenie w pracy z dużymi zbiorami danych (~100TB)
- Znajomość technologii związanych z mikroserwisami, programowanie w Java oraz znajomość języka Groovy będą dodatkowym atutem
- Zaawansowane umiejętności pracy w systemie Linux
- Samodzielność, kreatywność oraz umiejętność analitycznego myślenia
