Podatkovni Inženir

Podatkovni inženir gradi in vzdržuje cevovode za obdelavo podatkov (data pipelines) ter skrbi, da so podatki dostopni in zanesljivi za analitike in modele strojnega učenja.

Dela z orodji kot so Apache Spark, dbt, Airflow in oblačnimi podatkovnimi skladišči (BigQuery, Snowflake, Redshift).

Naloge

• ETL / ELT pipeline – Gradnja cevovodov za zbiranje, transformacijo in nalaganje podatkov
• Podatkovna skladišča – Upravljanje in optimizacija data warehouse-ov
• Kakovost podatkov – Implementacija testov kakovosti in Data observability
• Sodelovanje z analitiki – Podpora BI ekipam in data scientistom

Izobrazba – kako postati podatkovni inženir

• FRI – UL
• EF – UL
• UM FERI

Pogosta vprašanja

Kakšna je razlika med data engineerom in data scientistom?

Inženir gradi infrastrukturo za podatke; scientist jo uporablja za modele in analize.

Katera certifikacija?

Google Professional Data Engineer ali dbt Analytics Engineer Certificate sta zaželeni.