Cosa faccio
Curriculum
Formazione
Pet B1
University of CambridgeCambridge ESOL Entry Level Certificate in ESOL International: link.
Certificazioni
ID membro: rRczsH
Per vedere la certificazione clicca qui
Per vedere la certificazione clicca qui
Per vedere la certificazione qui
Esperienza lavorativa
Big Data Engineer
AgileLab
Big Data Engineer (Consulente)
Società assicurativa
Consulente Agile Lab- Ingestion, elaborazione e modellazione dei dati sulle piattaforme Cloudera e Databricks.
- Sviluppo di job Spark per l'elaborazione di dati batch e in tempo reale.
- Progettazione e realizzazione di pipeline ETL/ELT e workflow di dati.
- Modellazione dei dati, progettazione degli schemi e partizionamento per dataset su larga scala.
- Ottimizzazione e risoluzione dei problemi di carichi Databricks, Delta Lake e SQL.
- Partecipazione a iniziative di migrazione e modernizzazione della piattaforma, da Cloudera a Databricks.
Big Data Engineer
VT Solutions & Consulting
Lavoro su vari progetti interni ed esterni (come consulente) in ambito Big Data.
Società energetica
Consulente VT Solutions & Consulting- Sviluppo di job batch Apache Spark in Scala per l'ingestion e l'elaborazione di file Avro su HDFS.
- Progettazione e sviluppo di job Spark di Data Quality per report basati su Hive e Impala.
- Preparazione, modellazione e partizionamento dei dati.
- Forte focus sulle fasi di trasformazione e analisi dei dati per il reporting.
Società di telecomunicazioni
Consulente VT Solutions & Consulting- Struttura dei componenti software e documentazione del codice.
- Strategia di integrazione Git (con focus su modelli di branching come Git-Flow e GitHub-Flow, promozione di codice e ambienti).
- Principi di Data Lake (ingestion, preparazione ed esportazione dei dati, testing).
- Architettura Lambda, modellazione, preparazione e partizionamento dei dati.
- Analisi per la migrazione dell'ecosistema Cloudera a Google Cloud Platform.
Società TV
Consulente VT Solutions & Consulting- Modellazione e partizionamento dei dati in ecosistema Google Cloud Platform con BigQuery.
- Sviluppo di job Dataflow in Scala per l'ingestion e l'elaborazione di dati real-time (Avro) provenienti da Kafka.
- Sviluppo di DAG Airflow in Python per operazioni ETL sui dati del DWH.
- Realizzazione del DWH
Contattami
Giovanni Brunetti
Big Data e Software EngineerSe ti serve qualcosa, non esitare a contattarmi!
Email: gb1609@outlook.com


