Skydropx

Data Engineer

Colombia, Remote. Posted a month ago

The role

El candidato recolectará, transformará y diseñará pipelines de datos utilizando herramientas ETL. Trabajará con grandes volúmenes de datos mediante tecnologías como BigQuery, Python y SQL.

What you will do

  • Recolectar datos de diversas fuentes, incluyendo bases de datos, archivos CSV y APIs, utilizando herramientas ETL para realizar limpieza y preprocesamiento.
  • Quitar duplicados, normalizar formatos, validar, llenar o descartar nulos, mapear campos y enriquecer los datos para analisis eficiente.
  • Diseñar y construir pipelines de datos eficientes utilizando herramientas como Matillion, SQLMesh garantizando la automatización en la recolección, transformación y carga (ETL) de datos.
  • Integrar y consumir datos de APIs externas para enriquecer conjuntos de datos y mejorar la calidad de la información.
  • Contribuir al diseño de arquitecturas eficientes para el manejo de grandes volúmenes de datos, utilizando tecnologías como BigQuery, Python, SQL.

Required qualifications

  • Ingeniería, Actuaría, Matemáticas Aplicadas, Ingeniería Industrial o afín.
  • Experiencia sólida en programación, con especial énfasis en Python.
  • Desarrollo de código eficiente y resolución de problemas complejos.
  • Conocimiento profundo de librerías clave como NumPy, Pandas, Polars y uso avanzado de SQL.
  • Experiencia en la manipulación de datos a gran escala y optimización de consultas tanto en base de datos SQL como en BigQuery.
  • Experiencia en el uso de herramientas como Matillion, SQLMEsh para la construcción y gestión de flujos ETL.
  • Experiencia demostrable en el manejo de bases de datos, incluyendo la optimización de consultas SQL.
  • Conocimiento sobre bases de datos relacionales y no relacionales.
  • Conocimiento sobre Datawarehouse, datalake, datavault. BigQuery.
  • Experiencia en observabilidad.
  • Airflow, git.
  • Capacidad para comunicarse con equipos interdisciplinarios.

Benefits

  • Misión a nivel regional: lograr que los negocios de LATAM se despreocupen de su logística.
  • Salario: Competitivo y negociable según experiencia, habilidades y resultados del proceso de contratación.
  • Esquema: 100% remoto.
  • Flexibilidad de horario cuando haya nuevos releases.
  • Crecimiento y desarrollo profesional.

Before you apply

  • Si tu perfil hace match con los requerimientos de la vacante, nuestro equipo de reclutamiento estará en contacto contigo.

About the company

Skydropx es un equipo de personas visionarias que innovan la logística en un ambiente laboral dinámico, ambicioso y multicultural.

Data Engineer at Skydropx | JobZoey