PUBLICIDAD
Senior Lead Spark, Scala, GCP Bilingüe
ID | 2579155 | |
Buscado | BCtecnologia | |
Fecha | 2021-10-18 14:10:42 |
|
Ubicación | Santiago | CL |
Categoría | Informática / Telecomunicaciones | |
Duración | Indefinido | |
Tipo | Full-time |
Descripción oferta de trabajo
Senior Lead Spark, Scala, GCP
Over 7+ years of experience in handling large scale data migration projects, building of migration pipelines, validation framework and automations of entire data migration process
Should have experience in ETL projects with hands on experience in GCP, Spark, Scala and Informatica
Proficient in a Spark Scala programming for building and automating data pipelines
Should possess strong communication, planning, and interpersonal skills
Should have good knowledge on Airflow orchestration and preparing DAGs
Working knowledge of Google Cloud Platform on GCS, Bigtable, BigQuery
Good understanding of cloud design considerations and limitations and its impact on Pricing
Proficient in a Python/Scala programming for building and automating data pipelines.
Should have experience in building streaming pipelines using Kafka
Knowledge of Monitoring and auditing tools in GCP
Plan, Configure, Deploy and Operate a cloud solution
Ensure Performance standards by configuring Auto-Scaling Solution to meet varying Load requirements.
Pre and post validations of data, strong skills in data validation frameworks, reconciliation of large data set between different systems
Experience in doing different testing like regression, integration and performance
Experience in version control tools like Git
Must Have Skills:
GCP, Scala Spark, Airflow
Nice to Have Skills: Informatica, Kafka
Interesados: 0
Trabajos Relacionados
Misión del cargo: es responsable de la seguridad de la infraestructura de ti… Ver más
Oferta cercana¡en 3it somos entusiastas de la tecnología! si quieres trabajar en un lugar… Ver más
Oferta cercanaEstamos buscando un desarrollador y administrador de sql server altamente calificado para unirse… Ver más
Oferta cercana¿estas buscando nuevos desafíos? esta es una nueva oportunidad laboral. somos del rubro… Ver más
Oferta cercanaEstamos buscando un arquitecto azure devops apasionado por la innovación y la automatización… Ver más
Oferta cercanaEstamos en busqueda de desarrollador full stack apasionado por las tecnologías web modernas… Ver más
Oferta cercana