Puesto: Ingeniero de Datos Senior - Ciudadano estadounidense
Ubicación: Minneapolis, MN
Tasa: Depende de la experiencia
Requisitos adicionales
Ubicación: Minneapolis, MN
Tasa: Depende de la experiencia
Requisitos adicionales
Debe ser ciudadano estadounidense
- Debe estar actualmente ubicado en Minnesota (MN) o estar dispuesto a mudarse
Descripción
¡Buscamos un Ingeniero de Datos Senior para unirse a nuestro equipo dinámico! Con nuestro amplio conocimiento en servicios de ingeniería de aplicaciones, datos y nube, nos esforzamos por crear soluciones innovadoras que aporten un valor real a nuestros clientes.
¡Buscamos un Ingeniero de Datos Senior para unirse a nuestro equipo dinámico! Con nuestro amplio conocimiento en servicios de ingeniería de aplicaciones, datos y nube, nos esforzamos por crear soluciones innovadoras que aporten un valor real a nuestros clientes.
Responsabilidades clave
- Diseñar, desarrollar y mantener canalizaciones de datos escalables usando Apache Spark (PySpark y/o Scala)
- Construye y optimiza flujos de trabajo de datos en Databricks, incluyendo Delta Lake, notebooks y trabajos programados
- Ingerir, transformar y curar conjuntos de datos estructurados y semiestructurados a gran escala
- Realizar ajustes de rendimiento y optimización de costes de cargas de trabajo Spark y clústeres Databricks
- Implementar comprobaciones de calidad de datos, monitorización y gestión de errores
- Colaborar con analítica y partes interesadas del negocio para entregar datos bien modelados y listos para la analítica
- Soporte para procesamiento por lotes y, cuando corresponda, canalizaciones de datos en streaming
- Sigue las mejores prácticas para pruebas, documentación, seguridad y control de versiones
Cualificaciones requeridas
- 5+ años de experiencia en Ingeniería de Datos o roles relacionados
- Sólida experiencia práctica con Apache Spark (PySpark o Scala)
- Experiencia demostrada trabajando en entornos Databricks
- Sólidas habilidades y experiencia en SQL con bases de datos relacionales y analíticas
- Experiencia en la construcción y mantenimiento de pipelines ETL/ELT a gran escala
- Familiaridad con las arquitecturas modernas de data lake (prefiere Delta Lake)
- Experiencia con el control de versiones basado en Git
Opciones flexibles de teletrabajo disponibles.
Somos un empleador con igualdad de oportunidades y todos los candidatos calificados recibirán consideración por el empleo sin distinción de raza, color, religión, sexo, origen nacional, estado de discapacidad, estado de veterano protegido o cualquier otra característica protegida por la ley.
