Budapest

Irodai munkavégzés

A NIX, szoftverfejlesztők és IT szakemberek globális közvetítője munkatársat keres

Medior Data Engineer

A projektről

Olyan Data Engineer szakembert keresünk, aki szívesen csatlakozna csapatunkhoz, és részt venne modern data pipeline-ok kiépítésében és karbantartásában. Feladataid közé tartozik a felhőalapú megoldások (AWS, GCP, Azure) használata különböző ügyfélprojektekben, az adatintegráció, -transzformáció és -továbbítás támogatása. A munkavégzés során bevált iparági gyakorlatokat alkalmazol a teljesítmény, a megbízhatóság és a skálázhatóság biztosítása érdekében.

Feladatok

ETL/ELT adatfolyamok tervezése, építése és karbantartása olyan eszközökkel, mint: Databricks, Apache Spark, dbt, Snowflake.

Adatok betöltése és feldolgozása különböző forrásokból (API-k, üzenetsorok, relációs adatbázisok, fájlok) felhőalapú adatplatformba.

Munkafolyamatok ütemezése és irányítása Apache Airflow vagy felhőspecifikus eszközök segítségével.

Nagy mennyiségű adatok lekérdezésének és elemzésének támogatása SQL-alapú adattárházakban (pl. Snowflake, BigQuery, Redshift).

Munkavégzés nagy felhőplatformokon (AWS, GCP, Azure), azok natív adatmérnöki szolgáltatásainak felhasználásával.

Elvárások

Minimum 2 év tapasztalat adatmérnöki területen.

Magabiztos Python-tudás, Scala ismerete előnyt jelent.

Tapasztalat Databricks, Snowflake vagy más modern adatplatformok használatában.

Erős SQL-tudás és relációs adatbázisok (PostgreSQL, MySQL, SQL Server) ismerete.

Tapasztalat legalább egy felhőplatformmal és az alábbi szolgáltatásokkal:
AWS: Glue, Athena, Lambda, DMS, ECS, EMR, Kinesis, S3, RDS
GCP: Dataflow, BigQuery, Cloud Functions, Datastream, Pub/Sub, Dataproc, Dataprep
Azure: Data Factory, Synapse Analytics, Azure Functions, Data Explorer, Event Hubs, Data Wrangler

Előnyt jelent

Delta Lake, Apache Iceberg vagy más lakehouse formátumok ismerete.

Tapasztalat NoSQL adatbázisokkal (pl. MongoDB).

Ismeretek CI/CD, verziókezelés és tesztelési keretrendszerek alkalmazásában data pipeline-okhoz.

Gyakorlati tapasztalat konténerizált vagy serverless környezetekben (ECS, Cloud Run, AKS, Lambda).

dbt Cloud/Core használata és beillesztése adatfolyamatokba.

A NIX egy szoftvermérnöki és IT-outsourcing szolgáltatásokat nyújtó vállalat

Mely innovatív megoldásokkal áll elő a világ legnagyobb cégei számára, beleértve a Fortune 500-as listán szereplőket is. Szakembereink több éves tapasztalattal rendelkeznek az innovatív projektek fejlesztésében – az e-kereskedelemtől kezdve a felhő alapú megoldásokig egyaránt.