FREE ACCESS
5,000–10,000 jobs/day
See all jobs on Scoutfield
Search thousands of fresh jobs every day.
Discover
- Fresh listings
- Fast filters
- No subscription required
Create a free account and start exploring right away.
Junior Data Engineer
Stefanini LATAM. Diseñar, desarrollar y mantener pipelines de datos ETL/ELT, tanto batch como event-driven .
Tech Stack
Tools & technologiesAirflowApacheBigQueryCloudETLGoogle Cloud PlatformHadoopKafkaNoSQLPySparkPythonSparkSQLTerraform
About the role
Key responsibilities & impact- Diseñar, desarrollar y mantener pipelines de datos ETL/ELT, tanto batch como event-driven
- Implementar soluciones de procesamiento y almacenamiento sobre Google Cloud Platform
- Desarrollar procesos utilizando Python, SQL y Spark/PySpark
- Trabajar con BigQuery, Cloud Storage, Dataflow, Dataproc y Pub/Sub
- Implementar y mantener procesos de orquestación mediante Airflow / Cloud Composer
- Participar en la construcción y evolución de arquitecturas Data Lake, Data Warehouse y/o Lakehouse
- Diseñar y optimizar modelos de datos para procesamiento y explotación de información
- Automatizar procesos y despliegues mediante prácticas de CI/CD e Infrastructure as Code, idealmente utilizando Terraform
- Implementar controles de calidad, integridad, trazabilidad y disponibilidad de datos
- Optimizar pipelines, consultas y procesos considerando performance, escalabilidad y uso eficiente de recursos
- Participar en migraciones y modernización de plataformas de datos hacia Cloud
- Colaborar con equipos de Arquitectura, Data Science, BI, Desarrollo y áreas de negocio
- Documentar arquitecturas, pipelines, modelos y soluciones implementadas
- Apoyar técnicamente al equipo y promover buenas prácticas de Ingeniería de Datos
Requirements
What you’ll need- Conocimientos de Google Cloud Platform (GCP)
- Experiencia/conocimientos con BigQuery, Cloud Storage, Dataflow y/o Dataproc, Pub/Sub, Python, SQL avanzado y Apache Spark/PySpark
- Desarrollo de pipelines ETL/ELT
- Modelamiento y transformación de datos
- Airflow / Cloud Composer para orquestación
- Conocimientos deseables de DBT y/o Dataform, Terraform, Git y procesos CI/CD
- Conocimientos de Data Lake, Data Warehouse y/o Lakehouse
- Conocimientos de Hadoop y/o Kafka
- Conocimientos de bases de datos relacionales y NoSQL
- Conocimientos de Machine Learning y/o Vertex AI
- Conocimientos de gobierno y calidad de datos
Benefits
Comp & perks- No specific benefits listed; “Beneficios Stefanini” section is present without details