python开发工程师

岗位职责
1.负责爬虫架构的规划、编码实现及日常运维工作；
2.承担数据采集后的清洗与处理，确保满足业务端的数据使用需求；
3.攻克网络爬虫领域的关键技术难题，包括应对反爬机制、加密逻辑分析、验证码破解、IP代理池建设、Cookie管理体系建设等；
4.对爬虫系统进行持续监控与调优，提升运行效率并拓展功能边界；

任职要求
1.计算机类相关专业背景，本科及以上学历，具备较强抗压能力，乐于钻研技术问题，富有创新意识，勇于面对挑战，实践能力突出；
2.精通Python语言，具备3年以上实际爬虫项目开发经历，可独立承担采集任务开发，代码规范良好；
3.具备扎实的网页结构分析能力，深入了解各类反爬策略及其应对方案；
4.掌握Fiddler、Charles、Mitmproxy等网络抓包与调试工具的使用；
5.熟练运用Scrapy、requests、xpath、selenium等爬虫相关技术栈；
6.熟悉MySQL、MongoDB、Redis等数据库系统的操作与应用；
7.了解Linux操作系统常用指令操作；

加分项
1.具备大规模通用型爬虫项目或海量数据采集实践经验者优先考虑；
2.拥有JavaScript逆向分析或相关开发经验者优先录用；