Data Engineer - Big Data & GCP
Bcame
We work on enterprise data platforms and scalable pipelines on Google Cloud. We build reliable systems for ingesting, transforming, and analyzing large volumes of data.
Your role:
- Design and develop batch and streaming data processing pipelines using Apache Beam and Apache Spark on Google Cloud Dataproc .
- Model, optimize, and query large datasets in BigQuery , with a focus on cost and performance.
- Work with BigQuery Studio to explore data, develop analytical notebooks, and collaborate with data science and analytics teams.
- Monitor data quality and implement tests and alerts on production pipelines.
- Work with the Data Science team to ensure that data is accessible, reliable, and well-documented.
- Help define the team's data engineering standards: naming conventions, data catalog, and data lineage.
Your profile:
- BigQuery — Advanced SQL, Optimization — Intermediate/Advanced Level
- Python — Pipelines and Scripting — Intermediate Level
- Advanced SQL — Window Functions, CTE, Optimization — Intermediate Level
- Git/CI-CD — Collaborative Workflow — Intermediate Level
Nice to have:
- Experience with Google Cloud Dataflow (fully managed Beam pipelines).
- Knowledge of pipeline orchestrators: Apache Airflow / Cloud Composer .
- Introduction to data modeling : star schema, snowflake schema, Data Vault.
- Google Cloud Professional Data Engineer certification (or currently pursuing it).
What we offer:
- Permanent contract (National Collective Bargaining Agreement for the Retail Sector).
- Company canteen
- Structured professional development plan .
Offerta di lavoro pubblicata 3 giorni fa
Offerte di lavoro simili
- ...Bcame is seeking a Data Engineer in Catania, Italy to design and develop batch and streaming data processing pipelines using Apache Beam and Apache Spark on Google Cloud. The ideal candidate will have advanced SQL skills and intermediate proficiency in Python. The role...Big dataImpiego permanente
Bcame
Catania2 giorni fa - ...Lafert Group cerca un Data Engineer con esperienza tra 2 e 4 anni da inserire nel proprio team. Il candidato si occuperà di progettare e sviluppare pipeline di elaborazione dati batch e streaming utilizzando Apache Beam e Apache Spark su Google Cloud. Il ruolo richiede...Big dataImpiego permanente
Lafert Group
Catania2 giorni fa - ...di soddisfare le necessità dei clienti offrendo servizi personalizzati. Posizione Per azienda cliente, si ricerca Data Engineer – Big Data & GCP Progettare e sviluppare pipeline di elaborazione dati batch e streaming con Apache Beam e Apache Spark su Google Cloud...Big dataImpiego permanente
Lafert Group
Catania2 giorni fa - ...develop back-end applications and software services for enterprise and data-driven projects. We are looking for a Python developer who can... ...-driven architectures. Familiarity with cloud providers ( GCP, AWS ) for deployment and storage. Contributions to open-source...Consigliato
Bcame
Catania2 giorni fa - ...applicazioni backend e servizi software per progetti enterprise e data-driven. Cerchiamo uno sviluppatore Python con una buona autonomia... ...o event-driven. Familiarità con cloud provider ( GCP, AWS ) per deploy e storage. Contributi a progetti open source...ConsigliatoImpiego permanenteTempo pieno
Adviceweb
Catania1 giorno fa - ...looking for an ETL Developer to enhance its Business Intelligence solutions. The role includes developing ETL processes, integrating data from various sources, and collaborating with technical teams. Candidates should have intermediate skills in IBM DataStage/...
Bcame
Catania2 giorni fa - A technology solutions company located in Catania seeks a Cloud Engineer to join their growing team. The role involves designing and developing... ...effectively in English. Certifications in Azure, AWS, or GCP are preferred, along with strong troubleshooting, analytical, and...
Devstry S.R.L
Catania2 giorni fa - ...We develop Business Intelligence and reporting solutions for enterprise clients. We work on dashboards and business-oriented data analytics systems. Your role: ETL Process Development on IBM DataStage / DataFlow Data integration from heterogeneous sources...
Bcame
Catania3 giorni fa - ...Siamo alla ricerca di un DevOps Engineer con una forte passione per l’automazione e il cloud, da inserire nel nostro team IT OPS. Il ruolo... ...Plus : Certificazioni AWS, esperienza multi-cloud (Azure/GCP), GitOps Per candidarti compila il form Ti contatteremo...
A-Tono
Catania3 giorni fa - ...At Devstry we are a team of passionate engineers who build different kinds of softwares and... ...practices. Ensuring efficient functioning of data storage and processing functions in... ...Experience with SysOps. Azure, AWS, and GCP certifications preferred....
Devstry S.R.L
Catania2 giorni fa - Bcame, situata a Catania, cerca un professionista per il supporto a sistemi enterprise con focus sull'affidabilità e performance dei database. La figura collaborerà con team applicativi e si occuperà di SQL tuning e manutenzione evolutiva dei sistemi. Richieste competenze...
Bcame
Catania2 giorni fa - Adviceweb, situata a Catania, cerca uno sviluppatore Python esperto per progettare e sviluppare applicazioni backend e servizi software. Il candidato ideale ha una solida esperienza con Django o FastAPI e PostgreSQL, oltre a competenze in scrittura di test automatizzati...Impiego permanente
Adviceweb
Catania1 giorno fa - Bcame is looking for a skilled Python developer based in Catania, Italy. The role involves designing and developing RESTful APIs and backend services using Python, emphasizing best practices in readability, performance, and testability. The ideal candidate should have...
Bcame
Catania2 giorni fa - Pixoras.r.l. è una PMI Innovativa, che opera nel settore informatico, nata per favorire la digitalizzazione del "made in Italy" nel nostro Paese. La figura ricercata è quella di Analista Sviluppatore Software , che contribuirà alla creazione della prossima generazione...
Pixora S.r.l.
Catania13 ore fa - Un'agenzia di reclutamento leader è alla ricerca di un Robotics Engineer a Catania. Il candidato si occuperà dello sviluppo e integrazione di software per robot mobili. Sono richieste competenze sia in ROS che in Python e C++ e l'esperienza nell'implementazione di algoritmi...
Techyon S.r.l.
Catania1 giorno fa - ...inglese (scritta e parlata) Nice to have: TDD (Test Driven Development) Esperienza su piattaforme AWS e/o Google Cloud Platform (GCP) Conoscenza di tecnologie Java come J2EE, JDBC/Hibernate, Spring Boot, RabbitMq/Kafka Conoscenza di processi e strumenti CI/CD...Tempo pieno
Recooty
Misterbianco (CT)1 giorno fa - ...) e orchestrazione (Kubernetes è un plus). Esperienza con CI/CD e pratiche DevOps. Familiarità con cloud provider (Azure, AWS, GCP). Requisiti preferenziali (Nice to Have) Conoscenza di tecnologie di serverless . Esperienza nella gestione di grandi volumi...Smart working
