技能要求:
Python
经验要求:
5-10年经验
工作描述:
项目编号:【192053】
**技术要求:**
1. 5年以上 Python 爬虫或数据采集项目经验。
2. 熟悉 Scrapy、Playwright、Requests 等技术。
3. 具备数据源发现、网页结构分析和采集任务调度经验。
4. 熟悉 MySQL、Redis、PostgreSQL 等数据库。
5. 有数据清洗、去重、质量检测经验。
6. 有海外公开数据采集项目经验优先。
7. 能够独立完成系统设计、开发、部署和维护。
**项目范围:**
- 公开且允许采集的数据源发现与评估
- 数据清洗、去重、结构化存储
- 数据来源与使用权限记录
- 采集任务管理和监控
**合作方式:** 远程兼职 / 项目制 / 长期合作
要求提供真实项目案例,能够独立开发并交付源码及技术文档。