Ingeniero de Databricks

Descripción

Resumen: Buscamos un ingeniero de Databricks de alto nivel para construir, optimizar e implementar canalizaciones de datos de alto rendimiento y marcos MLOps para clientes empresariales. Aspectos destacados: 1. Construir soluciones Lakehouse de nueva creación en la vanguardia de la inteligencia artificial y los macrodatos 2. Diseñar, construir y optimizar canalizaciones ETL/ELT escalables mediante Apache Spark 3. Colaborar con ingenieros de aprendizaje automático y científicos de datos para construir características listas para producción * **Supervisión directa:** Líder de la práctica de Datos e IA * **Ubicación:** Teletrabajo (preferentemente basado en EE.UU., zona horaria del este o central) * **Tipo de empleo:** Contrato ¿Listo para construir soluciones Lakehouse de nueva creación en la vanguardia de la inteligencia artificial y los macrodatos? RevStar es un estudio de innovación y socio oficial de Databricks que lanza una práctica especializada y agnóstica frente a la nube en los ámbitos de Datos, Aprendizaje Automático e IA. Buscamos un ingeniero de Databricks de alto nivel para construir, optimizar e implementar canalizaciones de datos de alto rendimiento y marcos MLOps para clientes empresariales en AWS, Azure y GCP. En este puesto, trabajará directamente con arquitectos de datos, científicos de datos y líderes de clientes para transformar datos complejos en modelos de IA escalables y listos para producción. Por encima de todo, el candidato ideal personifica los valores fundamentales de RevStar: **Autodominio**: Mantenemos un alto estándar sobre cómo pensamos, comunicamos y mejoramos. **Responsabilidad**: Nos responsabilizamos de los resultados, no solo del esfuerzo. **Destino compartido**: Avanzamos o retrocedemos juntos. Pilares de su impacto Sus contribuciones técnicas se organizan en cuatro pilares estratégicos: 1\. Arquitectura Lakehouse e ingeniería de canalizaciones * Diseñar, construir y optimizar canalizaciones ETL/ELT escalables mediante Apache Spark y Delta Lake en entornos multi-nube (AWS S3, Azure Data Lake, GCS). * Implementar arquitecturas Lakehouse robustas capaces de procesar de forma transparente tanto datos estructurados como no estructurados a escala empresarial. * Automatizar flujos de ingesta y almacenamiento de datos para respaldar análisis posteriores y reportes operativos en tiempo real. 2\. Optimización del rendimiento y automatización * Ajustar finamente trabajos Spark para lograr baja latencia, alto rendimiento y máxima eficiencia de costos en la nube. * Implementar canalizaciones CI/CD e Infraestructura como Código (IaC) (Terraform, CLI de Databricks) para despliegues automatizados. * Construir marcos automatizados de supervisión, alertas y validación de calidad de datos para garantizar la fiabilidad de las canalizaciones. 3\. MLOps e integración de IA * Colaborar con ingenieros de aprendizaje automático y científicos de datos para construir canalizaciones de ingeniería de características listas para producción. * Apoyar el entrenamiento, seguimiento, versionado e implementación de modelos dentro de Databricks mediante MLflow. * Poner en funcionamiento modelos de IA/ML en entornos de producción seguros y escalables para aplicaciones de clientes. 4\. Gobernanza de datos y excelencia con clientes * Hacer cumplir las normas empresariales de seguridad de datos, controles de acceso y cumplimiento (GDPR, HIPAA, SOC 2). * Establecer mejores prácticas para trazabilidad de datos, gestión de metadatos y documentación operativa. * Colaborar con partes interesadas externas al cliente para alinear las implementaciones técnicas con resultados empresariales críticos. **Requisitos** **Imprescindibles:** * 3+ años de experiencia práctica en ingeniería de datos, con énfasis en procesamiento de macrodatos y arquitecturas nativas de la nube. * 2+ años de experiencia práctica con Databricks, incluidos Apache Spark, Delta Lake y MLflow. * Certificaciones de Databricks (obligatorias): * + Certificación Databricks Certified Data Engineer Associate (o superior) * Competencia en Python, SQL y frameworks basados en Spark. * Experiencia en el desarrollo y optimización de canalizaciones ETL/ELT a gran escala. * Profundo conocimiento de la arquitectura Lakehouse y soluciones de datos agnósticas frente a la nube. * Conocimientos sobre canalizaciones CI/CD e Infraestructura como Código (IaC) para Databricks (p. ej., Terraform, CLI de Databricks). * Conocimientos sobre buenas prácticas de gobernanza, seguridad y cumplimiento de datos. * Experiencia trabajando en entornos de desarrollo ágiles, siguiendo las mejores prácticas de DevOps/MLOps. **Deseables:** * Certificaciones adicionales de Databricks (p. ej., Databricks Certified Machine Learning Associate). * Experiencia con soluciones de transmisión en tiempo real (p. ej., Kafka, Kinesis, Event Hub). * Conocimientos sobre herramientas de almacenamiento en la nube y orquestación (p. ej., Apache Airflow, Prefect). * Experiencia previa en integración de IA/ML dentro de Databricks, apoyando la ingeniería de características y la implementación de modelos. * Experiencia en roles orientados al cliente o en entornos de consultoría. **Beneficios** **Beneficios para puestos a tiempo completo bajo régimen W2:** * **Días de permiso remunerado** – Tome el tiempo necesario para recargar energías y mantener su productividad. * **Entorno de trabajo centrado en el teletrabajo** – Colabore desde cualquier lugar mientras permanece conectado con nuestro equipo global. * **Cobertura sanitaria integral** – Médica, dental y visual * **Plan de jubilación 401(k)** – Planifique su futuro con acceso a un programa 401(k) patrocinado por la empresa. * **Subvención anual para aprendizaje y desarrollo** – Invierta en sus habilidades mediante conferencias, certificaciones o cursos. * **Mentoría y coaching entre pares** – Aprenda de ingenieros experimentados, gestores de producto y arquitectos para acelerar su crecimiento. * **Oportunidades de crecimiento profesional** – Exposición a tecnologías punteras de IA generativa de AWS, datos y nube en diversos sectores industriales. * **Eventos corporativos y oportunidades de voluntariado** – Fortalezca relaciones y contribuya a la comunidad. * **Cultura colaboradora e innovadora** – Trabaje junto a los mejores talentos en un entorno dinámico y solidario que valora la curiosidad y la iniciativa. **Igualdad de oportunidades en el empleo** En RevStar no solo aceptamos las diferencias: las celebramos, las apoyamos y prosperamos gracias a ellas, en beneficio de nuestros empleados, clientes y comunidad. RevStar se enorgullece de ser un lugar de trabajo que ofrece igualdad de oportunidades. **Acomodaciones razonables** RevStar se compromete a garantizar el acceso, la igualdad de oportunidades y las acomodaciones razonables para personas con discapacidad en el empleo, sus servicios, programas y actividades. Para solicitar una acomodación razonable, contacte al departamento de RR.HH. en hr@revstarconsulting.com.