Azure Data Engineer Rysun Labs

Rysun Labs Inc

Azure Data Engineer

Tiempo completo • Rysun Labs
Beneficios:
  • Seguro dental
  • Seguro médico
  • Tiempo libre remunerado
  • Formación y desarrollo
  • Seguro de visión
Rysun Labs (anteriormente KCS – Krish Compusoft Services) es un socio de referencia en innovación en IA, datos y digital para las empresas. Rysun guía y acelera la estrategia de IA y Datos y los programas de Transformación Digital para empresas Fortune 2000 y startups de productos, con el fin de moldear experiencias de cliente notables y operaciones inteligentes. El equipo ofrece soluciones innovadoras y especializadas que ayudan a empresas de alta tecnología, comercio minorista y electrónico, y energéticas a superar a la competencia y liderar el cambio en su sector. Rysun colabora con Microsoft, Google y AWS para ofrecer lo mejor de la tecnología empresarial a sus clientes. Rysun cree en la calidad antes y cuenta con la certificación CMMI Nivel 5, ISO 9001 y 27001. El equipo tiene una mentalidad de crecimiento impulsada por una fuerte cultura de colaboración que unifica a sus equipos globales en EE. UU., Reino Unido, India y Sudáfrica (orgulloso colaborador de nivel 2 B-BBEE).

Buscamos un ingeniero de datos cualificado para diseñar, desarrollar y optimizar soluciones de datos escalables basadas en la nube en Microsoft Azure. El candidato ideal tendrá una sólida experiencia en servicios de datos Azure, frameworks de gestión de datos, almacenamiento de datos moderno y desarrollo ELT/ETL usando dbt y Snowflake.
El puesto implica construir sólidas canaletas de datos, transformar datos en bruto en conjuntos de datos listos para análisis, implementar mejores prácticas para ingeniería de datos y colaborar con equipos multifuncionales para ofrecer soluciones de datos escalables y de alta calidad.
 
Título del puesto: Azure Data Engineer
Ubicación: Rol remoto
Experiencia: 6+ años
 
Responsabilidades clave
  • Diseñar, desarrollar y mantener canalizaciones de datos escalables utilizando Azure Data Factory (ADF V2).
  • Construir marcos automatizados de ingestión de datos para procesar datos masivos de múltiples sistemas fuente en plataformas objetivo.
  • Implementar estrategias de Watermark and Change Data Capture (CDC) para la carga incremental de datos.
  • Diseñar y desarrollar arquitecturas modernas de datos en la nube Azure para aplicaciones a gran escala.
  • Crea y gestiona soluciones de alojamiento seguras, escalables y rentables en Microsoft Azure.
  • Desarrollar, optimizar y mantener modelos DBT, macros, semillas, instantáneas y pruebas para transformar datos en bruto en conjuntos de datos listos para analítica.
  • Trabaja extensamente con Snowflake para desarrollar y optimizar modelos de datos, transformaciones y rendimiento.
  • Implementar control de versiones, documentación y mejores prácticas de despliegue para proyectos DBT.
  • Manejar y procesar múltiples formatos de archivo, incluyendo JSON, Parquet y otros datos estructurados o semiestructurados.
  • Colabora con analistas de datos, científicos de datos, arquitectos y equipos de negocio para comprender los requisitos de datos.
  • Optimiza las canalizaciones de datos para rendimiento, escalabilidad, fiabilidad y eficiencia de costes.
  • Garantizar la calidad de los datos implementando mecanismos de pruebas, validación y monitorización.
  • Solucionar y resolver problemas relacionados con la pipeline de datos y la plataforma.
  • Sigue las mejores prácticas del sector en seguridad, gobernanza y gestión de datos.
Cualificaciones requeridas
  • Licenciatura en informática, Tecnología de la Información, Ingeniería o un campo relacionado.
  • De 5 a 10 años de experiencia en Ingeniería de Datos o Ingeniería de Datos en la Nube.
  • Amplia experiencia en Microsoft Azure Data Services.
  • Experiencia práctica con Azure Data Factory (ADF V2).
  • Experiencia en diseño e implementación:
    • Marcos de Ingesta de Datos Masivos
    • Cargas incrementales basadas en marcas de agua
    • Captura de Datos de Cambio (CDC)
  • Sólido conocimiento de la arquitectura de la nube Azure y el diseño de plataformas de datos.
  • Experiencia trabajando con Snowflake como almacén de datos en la nube.
  • Experiencia práctica con dbt (Data Build Tool), incluyendo:
    • Modelos DBT
    • Macros
    • Pruebas
    • Documentación
    • Control de versiones
  • Experiencia procesando datos en formatos como:
    • JSON
    • Parquet
    • CSV
  • Sólidas habilidades de programación SQL y optimización de consultas.
  • Experiencia con el control de versiones basado en Git.
Compensación: 60,00 dólares la hora




(si ya tienes un currículum en Indeed)

O aplicar aquí.

* campos requeridos

Ubicación
Or
Or
If no code provided, add their name instead.