Responsabilidades del puesto

• Asistir en la incorporación de datos de todas las categorías
• Participar en la ingesta y limpieza de datos de alta frecuencia de CEX (como libros de órdenes, transacciones individuales), datos de mercado de baja frecuencia (como velas diarias, tasas de financiación), datos on-chain básicos (como información de bloques, transferencias de tokens) y datos macro, integrando APIs de exchanges (como Binance WebSocket, OKX REST) y nodos de blockchain (como Infura), asegurando la inmediatez y precisión de los datos.
• Mantener los scripts y herramientas de ingesta de datos, revisar periódicamente problemas de estabilidad de las interfaces (como desconexiones, pérdida de datos) y colaborar con el equipo para optimizar la latencia de la cadena de ingesta (objetivo: latencia de < 1 segundo desde la recepción de datos de alta frecuencia hasta su almacenamiento).
• Participar en la operación y optimización de bases de datos de alto rendimiento
• Colaborar en la construcción y mantenimiento de clústeres de bases de datos locales (por ejemplo, ClickHouse, Redis), encargarse del monitoreo diario de escrituras de datos, consultas y optimizaciones básicas (como ajuste de índices, configuración de estrategias de partición), garantizando un alto rendimiento en el almacenamiento de datos de alta frecuencia (soporte de decenas de millones de escrituras diarias).
• Participar en la implementación de soluciones de almacenamiento escalonado para datos de series temporales (por ejemplo, datos calientes en Redis, datos fríos archivados en almacenamiento de objetos), y colaborar con el equipo de estrategia en la depuración de consultas SQL para mejorar la eficiencia.
• Apoyar la operación diaria de la plataforma de datos
• Ayudar a construir un sistema de monitoreo y alertas de datos (por ejemplo, con Prometheus para monitorear latencia de datos y carga de bases de datos), respondiendo rápidamente y diagnosticando anomalías (como acumulación de datos, tiempo de espera en consultas).
• Organizar diccionarios de datos y documentación de integración, proporcionando soporte de consultas de datos básicos al equipo de estrategia (por ejemplo, asistiendo en la extracción de instantáneas del libro de órdenes para periodos específicos), reduciendo la barrera de uso.

Requisitos del puesto

• Conocimientos técnicos
• Aproximadamente 3 años de experiencia en desarrollo de bases de datos o ingeniería de datos, y al menos 1 año de experiencia relacionada con datos de alta frecuencia o en la industria Crypto (como integración con API de exchanges, datos on-chain).
• Dominio del lenguaje C++, capaz de desarrollar de forma independiente servicios de ingesta de datos (por ejemplo, cliente WebSocket, productor de Kafka); conocimientos de Python para escribir scripts de limpieza y validación de datos.
• Conocimiento de al menos una base de datos de alto rendimiento (por ejemplo, ClickHouse, Redis), y dominio de métodos básicos de optimización de escrituras (por ejemplo, escrituras por lotes) y ajustes de consultas (por ejemplo, filtrado por intervalo de tiempo).
• Familiaridad con el uso básico de colas de mensajería (por ejemplo, Kafka), comprensión de los principios básicos de frameworks de procesamiento de flujo (por ejemplo, Flink) y capacidad para participar en la construcción de canalizaciones de datos sencillas.
• Habilidades de ingeniería
• Habilidad para operaciones básicas en sistemas Linux, capaz de interpretar registros del sistema (por ejemplo, monitoreo de CPU, memoria, E/S de red) y resolver problemas básicos de despliegue de servicios.
• Experiencia en control de versiones de código (Git) y desarrollo colaborativo, con capacidad para seguir las normas de desarrollo del equipo al enviar código.
• Habilidades blandas
• Alta capacidad de aprendizaje, capaz de comprender rápidamente las características de los datos Crypto (como las reglas de contratos perpetuos, la estructura de transacciones on-chain).
• Comunicación clara, capaz de atender con precisión las necesidades de datos básicos del equipo de estrategia y colaborar en la resolución de problemas.

Puntos a favor

• Experiencia previa en equipos de trading cuantitativo, departamentos de datos de exchanges Crypto o market makers.
• Conocimiento de los detalles de las API de varias CEX principales (por ejemplo, las notificaciones depth@100ms de Binance, el libro de órdenes incremental de OKX).
• Experiencia utilizando herramientas Web3 (por ejemplo, Web3.py, Ethers.js) para analizar datos on-chain (como la extracción de registros de transferencias ERC20).
• Participación en despliegue de clústeres de ClickHouse o proyectos de procesamiento de flujo con Kafka, con casos reales de optimización de latencia de datos (por ejemplo, reducción de la latencia de escritura de 2 segundos a 500 ms).