爬虫开发工程师
Best Web3
Descripción del trabajo
岗位职责：
- 设计并实现高效、稳定、可扩展的爬虫系统，确保数据的实时性与完整性
- 深⼊研究各类反爬机制，开发绕过验证码、限流、 IP 封禁等策略，提升爬虫成功率
- 实现代理池、动态 UA、 Cookies 管理、 Session 维持等反爬解决方案
- 提升爬虫性能，优化爬取速度、数据存储结构及请求并发模型
岗位要求：
- 不限学历和专业
- 熟练使用 Python 技术栈： Scrapy、 Playwright、Selenium、Httpx、 Requests 等爬虫框架与库
- 熟悉反爬策略，包括但不限于代理池、 IP 轮换、验证码识别、动态加载页面解析、 JavaScript 渲染页面抓取等
- 有丰富的绕过网页限制经验，掌握如浏览器指纹、 Cookies 仿真、 Session 维持、前端加密破解等技术
- 熟悉异步编程、多进程、分布式爬虫架构，具备大规模数据爬取与存储经验
Miko M
HR ManagerBest Web3
Responder hoy 1 vez
Ubicación laboral
广州市. 中国广东省广州市
Publicado el 26 December 2025
Jobs similares
Ver más后端开发工程师
Best Web3€936-1.5K[Mensual]
En el sitio - China<1 Yr ExpBaceleroTiempo completo
Miko MHR Manager
后端开发工程师
香港链创智联科技有限公司€2.6-4.3K[Mensual]
En el sitio - China1-3 años de experienciaBaceleroTiempo completo
gray chen创始人
后端开发工程师
比特鹰€1-1.9K[Mensual]
En el sitio - China<1 Yr ExpEdu no requeridoTiempo completo
Chen BruceHR Manager
后端开发
Nftgo€2-3.2K[Mensual]
En el sitio - China1-3 años de experienciaBaceleroTiempo completo
daisy yuHR Manager
Golang 开发工程师
Sign€2.6-6.8K[Mensual]
En el sitio - ChinaExp de Yrs 5-10Edu no requeridoTiempo completo
Jay -人力資源經理
Recordatorio de seguridad del jefe
Si la posición requiere que trabajes en el extranjero, por favor ten cuidado y ten cuidado con el fraude.
Si encuentras a un empleador que tiene las siguientes acciones durante tu búsqueda de empleo, por favor repórtalo inmediatamente
- retiene tu ID,
- requiere que usted proporcione una garantía o recoja la propiedad,
- le obliga a invertir o recaudar fondos.
- recauda beneficios ilícitos,
- u otras situaciones ilegales.