Ingeniero de datos
Aviso de fuente externaen Forte Innovation Consulting
馃殌 隆Estamos buscando dos ingenieros en datos! 馃摡 Env铆ame tu CV Vacante 1 Ingeniero de Datos Estamos buscando un Ingeniero de Datos (Data Engineer) con s贸lida ex
Salario
No especificado
Ubicaci贸n
Guadalajara, M茅xico
Tipo de empleo
Tiempo completo
Modalidad
No especificado
Ingeniero de datos
Guadalajara, M茅xico
Descripci贸n del empleo
馃殌 隆Estamos buscando dos ingenieros en datos!
馃摡 Env铆ame tu CV
Vacante 1
Ingeniero de Datos
Estamos buscando un Ingeniero de Datos (Data Engineer) con s贸lida experiencia en el dise帽o, desarrollo y mantenimiento de soluciones empresariales de datos.Esta posici贸n ser谩 responsable del dise帽o, estructuraci贸n, integraci贸n y mantenimiento de datos en almacenes de datos (Data Warehouses), almacenes de datos operacionales (Operational Data Stores) y otras infraestructuras de datos empresariales.El candidato ideal deber谩 combinar s贸lidos conocimientos t茅cnicos en SQL, ingenier铆a de datos, procesos ETL, integraci贸n de datos y arquitectura de datos, con excelentes habilidades anal铆ticas y de resoluci贸n de problemas.Trabajar谩 en estrecha colaboraci贸n con equipos t茅cnicos y 谩reas de negocio para dise帽ar soluciones de datos confiables, optimizar cargas de trabajo de alto volumen y garantizar que la informaci贸n sea precisa, accesible y adecuada para las necesidades del negocio.Responsabilidades principales- Gesti贸n e integraci贸n de datos: Ser responsable de la capa intermedia del pipeline de datos, integrando informaci贸n de interacciones de Quantum con datos de cuentas, dispositivos y otras fuentes operativas.- Desarrollo de procesos ETL: Dise帽ar, desarrollar y mantener flujos de trabajo ETL (Extracci贸n, Transformaci贸n y Carga) que procesen y transformen datos con frecuencias diarias, semanales y mensuales.- Administraci贸n de recursos en AWS: Desarrollar y gestionar recursos de procesamiento de datos en AWS, validar los resultados y preparar conjuntos de datos confiables para su visualizaci贸n y an谩lisis en Tableau.- Optimizaci贸n de estructuras de datos: Dise帽ar y mantener estructuras de datos para aplicaciones que minimicen los requerimientos de procesamiento y permitan un rendimiento eficiente de los dashboards y tableros de an谩lisis.- An谩lisis y resoluci贸n de incidencias: Investigar discrepancias en los datos, identificar y solucionar problemas en los pipelines, as铆 como adaptar los flujos de trabajo conforme evolucionen las funcionalidades de las aplicaciones y las necesidades de generaci贸n de reportes.- Colaboraci贸n t茅cnica: Trabajar de manera coordinada con el l铆der de ingenier铆a, otros ingenieros de datos, desarrolladores de aplicaciones y responsables de productos de datos, contribuyendo al crecimiento y evoluci贸n de los pipelines conforme aumente su complejidad.
Experiencia profesional: M铆nimo 5 a帽os de experiencia en Ingenier铆a de Datos, Arquitectura de Datos o 谩reas relacionadas.AWS: Experiencia pr谩ctica s贸lida en Amazon Web Services (AWS), incluyendo la administraci贸n de recursos para el procesamiento de datos.SQL y Spark: Dominio de SQL y experiencia trabajando con Apache Spark.ETL e integraci贸n de datos: Experiencia en el desarrollo de pipelines ETL, integraci贸n de m煤ltiples fuentes de informaci贸n y organizaci贸n de datos para an谩lisis y generaci贸n de reportes.Pensamiento anal铆tico: Capacidad de investigaci贸n, an谩lisis y resoluci贸n independiente de problemas t茅cnicos complejos o poco definidos.Trabajo colaborativo: Habilidad para trabajar en equipo, asumir la responsabilidad de las actividades asignadas y colaborar dentro de una estructura de trabajo establecida.Ingl茅s avanzado: Dominio avanzado del idioma ingl茅s.
vacante 2
Ingeniero de Datos
El equipo de Productos de Datos (Data Products Team) es responsable de desarrollar y certificar los productos de datos que respaldan la gesti贸n de interrupciones del servicio y la generaci贸n de reportes de confiabilidad.El equipo administra el ciclo de vida completo de los datos, desde la recepci贸n de informaci贸n de las fuentes originales hasta la entrega de conjuntos de datos validados y listos para su utilizaci贸n por las 谩reas correspondientes.Estamos buscando un Ingeniero de Datos (Data Engineer) con s贸lida experiencia pr谩ctica en el desarrollo y mantenimiento de pipelines ETL, implementaci贸n de validaciones de calidad de datos y soporte en la entrega de productos de datos certificados y versionados.El candidato trabajar谩 en estrecha colaboraci贸n con el equipo t茅cnico y las 谩reas operativas para garantizar la precisi贸n, confiabilidad y disponibilidad de la informaci贸n destinada a reportes, an谩lisis y necesidades del negocio.
- Desarrollo de pipelines ETL: Dise帽ar, desarrollar y mantener pipelines ETL escalables utilizando AWS Glue, Spark y Athena, para procesar datos de telemetr铆a de m贸dems, eventos de interrupci贸n del servicio e informaci贸n sobre el impacto a los clientes.- Validaci贸n de calidad de datos: Desarrollar y administrar controles diarios de calidad de datos, incluyendo validaciones mediante SQL, alertas basadas en umbrales y monitoreo del n煤mero de registros procesados.- Identificaci贸n y resoluci贸n de anomal铆as: Investigar inconsistencias en los datos, como valores nulos, registros duplicados, intervalos faltantes y distribuciones inesperadas de informaci贸n, resolviendo los problemas antes de que afecten a los sistemas posteriores.- Integraci贸n de m煤ltiples fuentes de datos: Integrar informaci贸n proveniente de diferentes sistemas, incluyendo AOM, IPDR, Scope, CARS, IRIS y Gisual, para generar conjuntos de datos unificados, confiables y validados.- Certificaci贸n de productos de datos: Participar en los procesos de certificaci贸n mediante la validaci贸n de resultados y la verificaci贸n del cumplimiento de los est谩ndares de calidad establecidos antes de entregar la informaci贸n a los usuarios y 谩reas involucradas.- Gesti贸n de versiones y liberaciones: Coordinar la liberaci贸n de nuevas versiones de productos de datos, incluyendo el desarrollo de casos de prueba, elaboraci贸n de notas de versi贸n, decisiones de aprobaci贸n o suspensi贸n de liberaciones (go/no-go) en conjunto con usuarios finales y aplicaci贸n de correcciones mediante un proceso estructurado.- Documentaci贸n t茅cnica: Documentar las metodolog铆as de validaci贸n de datos, el funcionamiento de los pipelines y los procedimientos de liberaci贸n de productos de datos.- Colaboraci贸n con equipos multidisciplinarios: Trabajar de manera coordinada con otros ingenieros de datos, equipos de Inteligencia de Negocios (BI) y responsables operativos durante todo el ciclo de desarrollo y entrega de datos.
- SQL avanzado: Dominio de SQL, incluyendo funciones de ventana (LAG, PARTITION BY), agrupaciones avanzadas (GROUPING SETS), manejo de valores nulos y patrones de consultas espec铆ficos de Amazon Athena.- Python: Experiencia utilizando Python para desarrollar scripts, automatizar procesos y realizar validaciones de datos.- AWS: Experiencia pr谩ctica con servicios de datos de Amazon Web Services, especialmente AWS Glue, Athena, S3, EMR y Step Functions.- Apache Spark: Experiencia en el procesamiento de grandes vol煤menes de datos utilizando Spark, preferentemente sobre Amazon EMR.- Calidad de datos: S贸lidos conocimientos en aseguramiento de calidad de datos, identificaci贸n de anomal铆as, an谩lisis de causas ra铆z y detecci贸n de inconsistencias.- Validaci贸n de pipelines: Experiencia verificando el funcionamiento de los pipelines de datos y garantizando la precisi贸n, integridad y consistencia de la informaci贸n antes de su utilizaci贸n por otros sistemas o 谩reas de negocio.- Comunicaci贸n y documentaci贸n: Excelentes habilidades de comunicaci贸n escrita, con capacidad para documentar metodolog铆as t茅cnicas y coordinarse eficazmente con equipos de trabajo y partes interesadas.-Ingl茅s avanzado: Dominio avanzado del idioma ingl茅s.
Conocimientos deseables (Nice to Have)- Experiencia trabajando con datos de telecomunicaciones u operaciones de redes, incluyendo telemetr铆a de m贸dems, registros de interrupciones de servicio o flujos de datos similares a IPDR (Internet Protocol Detail Record).