DATA ENGINEER

Descripción del puesto Data Engineer.
Objetivo del puesto.
d esarrollo de productos de software en tiempo, calidad y alcance, aplicando las mejores practicas produciendo un software escalable, flexible y seguro.
Responsabilidades.
Participar en las reuniones con múltiples áreas para discutir las definiciones y objetivos de proyectos Analizar y priorizar los requerimientos de diversas áreas.
Responsable del desarrollo y diseño de pipelines de extracción, transformación y carga de datos Escribir código limpio y escalable, y aprender nuevos lenguajes para implementarlo en diversas soluciones.
Desarrollo de aplicaciones de extracción de datos de diversos formatos como JSON, XML, PDFs, etc.
Implementar metodologías de calidad de datos en el proceso de extracción Optimización de servicios, queries y procesos para garantizar un bajo costo tanto del sistema como operacional Validar la funcionalidad y seguridad de los procesos de ingeniería de datos Obligatoriedad respecto a la seguridad de la información 1.
Asegurar que conoce y aplica las políticas de la empresa respecto a la seguridad de la información.
Políticas generales de seguridad de la información.
Políticas de pantalla y escritorio limpio.
Política de teletrabajo.
Políticas para control de acceso a las instalaciones.
2.
Asegurar que conoce y sigue los procesos, procedimientos y políticas que apliquen para el desempeño de sus labores y el cumplimiento con la seguridad de la información, como.
Uso de contraseñas.
Control de accesos.
Uso respecto al equipo desatendido.
Uso aceptable de activos y de la información.
3.
Participar en el diseño, implementación, control y mejora de los procesos y políticas de la empresa.
4.
Clasificar y hacer uso correcto de la información de acuerdo con las políticas establecidas por la empresa.
Políticas para clasificación de activos e información.
5.
Participar en las capacitaciones del Sistema de gestión.
6.
Contar con la disponibilidad para llevar a cabo los mantenimientos preventivos y correctivos de equipos informáticos, así como en las actualizaciones de software y aplicaciones.
7.
Notificar posibles incidentes de seguridad y participar en las acciones derivadas en caso de ser necesario.
Requisitos Lenguajes de programación Java / Scala, Python y SQL Experiencia en ingeniería de datos tanto en streaming como batching (Spark, Flink, Lambdas, etc.) Conocimiento en Bases de datos SQL y NoSQL (Postgres, Teradata,, Cassandra, Mongo, etc.) Experiencia con orquestadores y herramientas E(T)LT (Airbyte, Stitch, Streamsets, Airflow, etc.) Experiencia en transformación masiva de datos y manejo de diferentes objetos y archivos de datos como XLSX, CSV, JSON, XML, BSON, YAML or Binary Schema Experiencia en creación, despliegue y arquitectura de Data Lakes, DWH y Lake house y conocimiento en alguna plataforma (Clickhouse, Databricks, Snowflake, BQ, etc.) Creación y consumo de servicios REST Experiencia en modelado de datos y esquemas (Snowflake, OBT, Estrella, etc.) Metodologías agiles y control de versión de código (Git) Experiencia en proyectos de Webscrapping (Deseable) Conocimiento en lenguajes adicionales como Go, Javascript (Deseable) Experiencia en desarrollo de aplicaciones de streaming y colas (Kafka, RabitMQ, etc) (Deseable) Experiencia en proyectos de ciencia de datos (Deseable) Beneficios 100% remoto Modalidad freelance Pago en USD