Ingeniero de Datos ETL
Washington DC
Ingeniero de Datos ETL
Tiempo completo • Washington DC
TÍTULO: Ingeniero de Datos ETL
UBICACIÓN: Washington, DC/ En el lugar
Tipo de empleo: Contrato w2/1099/C2C
EDUCACIÓN MÍNIMA: Licenciatura en informática, campo relacionado o experiencia equivalente.
EXPERIENCIA REQUERIDA: 16 años
ENTREVISTAS: Webcam y presencial
Descripción del puesto:
El equipo de Datos Empresariales del cliente requiere un ingeniero de datos ETL para apoyar las operaciones de datos de su Cloud Data Exchange. El recurso utilizará herramientas nativas de Azure para realizar ETL, carga de datos y tareas de transformación de datos.
Tipo de empleo: Contrato w2/1099/C2C
Descripción completa:
El ingeniero de datos ETL apoyará al equipo de datos empresariales del cliente en tareas de curación, procesamiento y transformación de datos. Específicamente, el ingeniero de datos ETL será responsable de las siguientes tareas:
Responsabilidades:
· Analiza, diseña, desarrolla, implementa, replica y apoya proyectos complejos de datos empresariales.
· Interactuar con otras agencias, consultar e informar a los departamentos usuarios sobre los requisitos del sistema, asesorar sobre limitaciones ambientales y dificultades operativas para el estado actual, asesorar y resolver problemas utilizando soluciones en la nube y desarrollar y replicar futuras mejoras en los sistemas de datos del Distrito.
· Sólido conocimiento de procesos de Extracción, Transformación y Carga (ETL) utilizando frameworks como Azure Data Factory, Synapse, Databricks, Informatica, recopilando requisitos de los interesados o analizando el código existente y realizando mejoras o nuevos desarrollos.
· Establecer la conectividad en la nube y on-premise en diferentes sistemas como ADLS, ADF, Synapse, Databricks
· Experiencia práctica en servicios cloud Azure como Azure Data Factory o Azure Synapse, MSSQL Db, Azure SQL DB, Azure Data Lake Storage Gen2, Blob Storage, Python, etc.
· Trabajé en la creación de pipelines de extremo a extremo para cargar datos leyéndolos de múltiples fuentes o sistemas fuente y cargando en la capa de aterrización o en tablas SQL.
· Familiaridad/experiencia con integración de datos y herramientas de pipeline de datos (por ejemplo, Informatica, Synapse, Apache NiFi, Apache Airflow)
· Familiaridad/experiencia con varios formatos de datos, incluyendo datos específicos (Oracle, SQL Server, DB2, Quickbase), formatos de texto (CSV, XML) y binario (Parquet, AVRO)
· Desarrolla, estandariza y optimiza los flujos de trabajo y pipelines de datos existentes siguiendo las mejores prácticas.
· Adhire y contribuir a los estándares de gobernanza de datos empresariales asegurando la precisión, consistencia, seguridad y fiabilidad de los datos.
· Automatiza, monitoriza, alerta y gestiona canalizaciones y flujos de trabajo de datos.
· Analiza y evalúa los cambios del sistema para determinar la viabilidad, ofrece soluciones alternativas, procedimientos de respaldo y de reversión.
· Trabaja en el desarrollo de nuevos sistemas, actualizaciones y mejoras de los sistemas existentes y asegura que los sistemas sigan los estándares aprobados y la coherencia tras los cambios.
· Desarrolla programas e informes complejos en lenguaje de consulta de bases de datos.
· Familiaridad/experiencia con herramientas de visualización de datos.
Habilidades:
· Sólido conocimiento para el desarrollo de procesos de Extracción-Transformación-Carga (ETL), incluyendo pipelines de extremo a extremo con carga de datos desde múltiples fuentes. 15 años requeridos
· Capacidad para recopilar y documentar los requisitos de extracción, transformación y carga de datos. 15 años requeridos
· Comprensión de conceptos y estándares de almacenamiento de datos, data lake, inteligencia empresarial y gestión de la información. 15 años requeridos
· Capacidad para asesorar a clientes internos y externos sobre herramientas y sistemas adecuados para desafíos complejos de procesamiento de datos. 15 años requeridos
· Conocimiento y uso de SQL para bases de datos relacionales. 11 años requeridos
· Experiencia con varios formatos de datos, incluyendo datos específicos (Oracle, SQL, Postgres, DB2), formatos de texto (CSV, XML) y binarios (Parquet, AVRO). Se requieren 11 años
· Sólida experiencia con herramientas de Microsoft Azure como Azure Data Factory, Synapse, SQL Database, Data Lake Storage Gen2, Blob Storage. 5 años requeridos
· Contribuir a los estándares de gobernanza de datos empresariales garantizando precisión, consistencia, seguridad y fiabilidad. 7 años requeridos
· Experiencia con integración de datos y herramientas de pipeline de datos como Informatica PowerCenter, Apache NiFi, Apache Airflow y FME. 5 años requeridos
· Experiencia con software de visualización e informes como MicroStrategy, Tableau y Esri ArcGIS. 3 años muy solicitado
· Fuertes habilidades de comunicación, tanto oral como escritas. 3 años requeridos
· Capacidad para ofrecer un excelente servicio al cliente a socios externos. Se requieren 3 años
· Capacidad para trabajar de forma independiente o como parte de un equipo más grande. Se requieren 3 años
· Experiencia realizando funciones de datos con Databricks. 3 años muy solicitado
Compensación: 65,00 $ - 70,00 $ la hora
Sobre nosotros
AHU Technologies INC. es una empresa de consultoría de TI y dotación de personal permanente que satisface y supera las necesidades cambiantes de servicios de TI de las principales corporaciones dentro de los Estados Unidos. Hemos estado brindando soluciones de TI a clientes de diferentes sectores de la industria, ayudándolos a controlar los costos y liberar recursos internos para enfocarse en temas estratégicos.
AHU Technologies INC. fue cofundada por jóvenes emprendedores tecno-comerciales visionarios que siguen siendo nuestros principales consultores. Al mantener relaciones de trabajo con un grupo de otros consultores independientes altamente calificados, tenemos un número creciente de recursos disponibles para proyectos de desarrollo. Actualmente estamos trabajando en varios proyectos como entretenimiento multimedia, soluciones ERP, almacenamiento de datos, aplicaciones web, telecomunicaciones y medicina para nuestros clientes en todo el mundo.
(si ya tienes un currículum en Indeed)