Data Engineer
Posted Updated
Description
Cześć! Poznaj możliwości współpracy ze Scalo!
W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych.
Obszary naszej działalności obejmują m.in.:
- doradztwo technologiczne,
- tworzenie oprogramowania,
- systemy wbudowane,
- rozwiązania chmurowe,
- zarządzanie danymi,
- dedykowane zespoły projektowe.
Co oferujemy w ramach współpracy?
- możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services,
- zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie,
- dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.
Kompetencje wymagane do realizacji usług:
- doświadczenie w inżynierii danych, w szczególności w budowaniu pipeline’ów i usług przetwarzających dane (min. 3-5 lat doświadczenia),
- dobra znajomość Pythona lub Rusta,
- praktyczna znajomość wektorowych baz danych, w szczególności Qdrant,
- znajomość embeddingów, wyszukiwania semantycznego, indeksowania i filtrowania danych po metadanych,
- doświadczenie w projektowaniu lub rozwijaniu integracji opartych na REST API,
- znajomość architektury sterowanej zdarzeniami (event-driven architecture), np. z wykorzystaniem Kafka lub Pub/Sub,
- dobra znajomość systemu Linux,
- znajomość relacyjnych baz danych, np. PostgreSQL,
- umiejętność projektowania i rozwijania procesów przetwarzania danych,
- samodzielność w analizie problemów technicznych i proponowaniu rozwiązań.
Mile widziane:
- doświadczenie z Docker, Kubernetes i CI/CD,
- znajomość GCP, w tym BigQuery, Dataflow, Dataproc lub Pub/Sub,
- znajomość Apache Airflow, Apache Spark lub Apache Beam,
- doświadczenie z przetwarzaniem danych niestrukturalnych, w tym OCR, transkrypcją audio i konwersją dokumentów,
- znajomość grafowych baz danych, np. Neo4j,
- doświadczenie z Knowledge Graph, GraphRAG lub klasycznymi rozwiązaniami RAG,
- znajomość FastAPI.
