Google Cloud Data Engineer
Business Integration Partners · Roma, Italy ·
- Category
- Data engineering
Business Integration Partners · Roma, Italy ·
BIP · Roma, Lazio, Italy
BIP · Milano, Lombardia, Italy
Capgemini
NTT · Roma, Italy
You build batch and real-time data pipelines on Google Cloud Platform as a consultant: acquiring, cleansing and anonymizing data, preparing datasets for data scientists and BI, and optimizing/scheduling their ML models. Core stack is GCP DataFlow, Composer, Data Fusion, Vertex, BigQuery, Cloud SQL and Firestore, plus SQL/Java/Python.
In questa posizione operi sulla Data Platform GCP per costruire pipeline batch e real-time, trasformando e preparando dati strutturati e non strutturati. Sarai autonomo in acquisizione, storicizzazione, cleansing e anonimizzazione dei dati, gestendo outlier e dati nulli, e creando KPI di qualità. Lavorerai a stretto contatto con Data Scientist, strumenti di BI/Visualization e strutture sia relazionali sia NoSQL, per fornire dataset pronti all’uso. Riceverai modelli di ML dai Data Scientist, li ottimizzerai per esecuzione scalata e li schedulerai per automatizzare l’integrazione. Avrai un ruolo di consulenza sulle scelte di servizi GCP, costruendo relazioni con clienti e partner, e contribuom
Retribuzione / BenefitsDatwave · Milano, Italy