Data Engineer

**Czym będziesz się zajmować?** * Projektowanie, implementacja i rozwój platform oraz procesów do przetwarzania danych **w czasie rzeczywistym (real-time)** i wsadowo   * Budowa i rozwój architektury opartej o **event streaming** oraz integrację systemów wymieniających dane w czasie rzeczywistym  * Tworzenie i optymalizacja pipeline’ów danych oraz modeli danych dla systemów analitycznych i operacyjnych   * Projektowanie niezawodnych, skalowalnych rozwiązań we współpracy z zespołem DevOps   * Wsparcie klientów z obszaru Energy, Utilities i Manufacturing w budowie nowoczesnych platform danych   **Kogo poszukujemy?** * Masz minimum **3 lata** doświadczenia jako Data Engineer   * Cechuje Cię bardzo dobra znajomość Python i SQL   * Posiadasz doświadczenie w projektowaniu i budowie pipeline’ów danych, w szczególności **przetwarzania danych strumieniowych i eventowych** * Znasz architekturę **event-driven** oraz narzędzia do przetwarzania danych w czasie rzeczywistym (np. Apache Kafka, Kafka Connect, Apache Flink, Spark Structured Streaming, Apache Pulsar, Azure Event Hubs, Google Pub/Sub)   * Możesz pochwalić się znajomością relacyjnych baz danych oraz technologii wykorzystywanych do budowy nowoczesnych platform danych   * Praca z Git oraz CI/CD nie jest Ci obca  * Masz doświadczenie z wybranymi technologiami z obszarów:   1. Open Source Data: Apache Kafka, Spark, Flink, Trino, Hive   2. Chmury publiczne: Azure, AWS, Google Cloud   3. Orkiestracja i integracja: Airflow, NiFi   4. Storage: S3-compatible Object Storage, Azure Storage, GCS   5. Formaty danych: Iceberg, Delta Lake   6. Bazy danych: PostgreSQL, TimescaleDB, SQL Server   * Umiesz monitorować jakości danych oraz diagnozować problemy wydajnościowe   * Nie boisz się współpracy z klientem i rozumiesz potrzeby biznesowe   * Cechuje Cię komunikatywność a Twój język angielski umożliwia codzienną pracę   **Czego wymagamy?** 3 lata doświadczenia na podobnym stanowisku Języki: * Polski * Angielski **Jakie warunki i benefity otrzymasz?** * 15k–20k PLN netto/m (B2B) * B2B - Elastyczne godziny pracy (100%) * Praca zdalna: Dowolnie * Szkolenia wewnętrzne, Klasy językowe * Pakiet medyczny, Ubezpieczenie, Pakiet sportowy * Kawa / Herbata * Parking * Płatny "urlop" dla B2B **Kim jesteśmy?** **ConnectPoint** specjalizuje się w dostarczaniu rozwiązań IoT, IT/OT oraz własnych produktów IT dla przemysłu. Wykorzystujemy wiedzę i specjalizację branżową dostarczając technologie wsparcia monitoringu procesów produkcyjnych, optymalizacji energetycznej, integracji systemów, tworzenia oprogramowania, przetwarzania i raportowania danych, GIS, BI i kompetencji w zakresie uczenia maszynowego oraz big data. Naszymi klientami są zarówno największe międzynarodowe koncerny, jak i lokalni dostawcy energii, wody i ciepła.