Budapest

Irodai munkavégzés

A NIX, szoftverfejlesztők és IT szakemberek globális közvetítője munkatársat keres

Senior Data Engineer Scala

Feladatok

Működj együtt többfunkciós csapatokkal a dinamikus üzleti követelmények teljesítése érdekében. Azonosítsd, tervezd, és valósítsd meg a valós idejű adatfeldolgozási funkciókat, hogy megfeleljenek a dinamikus üzleti követelményeknek.

Tervezz és tarts karban bővíthető rendszereket a különböző forrásokból, például külső API-kból, adatfolyamokból és adatbázisokból származó adatok kinyerésére, átalakítására és betöltésére.

Valósíts meg stabil megoldásokat, az adatvédelmi és biztonsági szabványok betartásával, biztosítva a követelményeknek való megfelelést, és az adatok integritását.

Kövesd nyomon az iparági trendeket és a valós idejű adatfeldolgozás fejlődését. Javasolj és hajts végre a szervezeti célokhoz igazodó változtatásokat.

Vegyél részt a tudásmegosztásban és működj együtt a csapatokkal a projekttel kapcsolatos témákban.

Értékeld, válaszd ki és vezesd be a hatékony valós idejű adatintegrációs forgatókönyvek eszközeit és stratégiáit.

Elvárások

5+ év kereskedelmi tapasztalat az adatfeldolgozás területén, különös tekintettel a valós idejű feldolgozásra.
Profi programozási készségeid vannak a Scala nyelven.
Alapos ismeretekkel és gyakorlati tapasztalattal rendelkezel az elosztott számítástechnikai megközelítések, minták és technológiák terén, különösen a valós idejű feldolgozással kapcsolatban (pl. Spark Streaming, Akka Streams).
Gyakorlati tapasztalatod van bármely felhőplatformmal (GCP, AWS, Azure) és annak adatorientált komponenseivel kapcsolatban.
Jártas vagy a Scala, az SQL és a lekérdezések hangolásában.
Az adattárházi elvekben és modellezési koncepciókban járatos vagy.
Ismered a relációs adatbázisok (PostgreSQL, MSSQL vagy MySQL) használatát.
Tapasztalt vagy az adatáramlások összehangolásában olyan eszközökkel, mint az Apache Flink, az Apache Kafka vagy hasonló technológiák.
Kiváló kommunikációs készséggel rendelkezel, együttműködő csapatjátékos vagy.
Legalább B2 szintű angol nyelvtudással rendelkezel.

Előnyt jelent

Szakértő vagy az ipari szabványok (pl. AWS Kinesis, Kafka Streams, Spark) felhasználásával történő adatfolyam-feldolgozásban.

Mélyrehatóan ismered az adattárolás tervezési elveit, valamint érted az SQL/NoSQL megoldásokat és azok konfigurációit.

Tapasztalatod van a modern adattárházak építésében olyan platformok használatával, mint a Snowflake, az AWS Redshift vagy a BigQuery.

Jártas vagy a Spark belső tulajdonságaiban, beleértve a valós idejű feldolgozáshoz szükséges hangolást és lekérdezés-optimalizálást.

Adatintegrációs és üzleti intelligencia-architektúrában real-time háttérrel rendelkezel.

“Data Lake”-ekkel és “Lake-house”-okkal (pl. Azure Data Lake, Apache Hudi, Apache Iceberg, Delta Lake) kapcsolatos tapasztalataid vannak.

Ismered a konténeres (Docker, ECS, Kubernetes) vagy szerver nélküli (Lambda) telepítéseket.

Ismered a népszerű adatszabványokat és formátumokat (pl. JSON, Avro, ProtoBuf).

Adattudományi és machine learninggel kapcsolatos tapasztalatod van.

A NIX egy szoftvermérnöki és IT-outsourcing szolgáltatásokat nyújtó vállalat

Mely innovatív megoldásokkal áll elő a világ legnagyobb cégei számára, beleértve a Fortune 500-as listán szereplőket is. Szakembereink több éves tapasztalattal rendelkeznek az innovatív projektek fejlesztésében – az e-kereskedelemtől kezdve a felhő alapú megoldásokig egyaránt.