岗位职务
1.设计和开发高效、稳定的网络爬虫系统，实现自动化数据采集。
2.优化爬虫策略和算法，提升数据抓取效率和准确性。
3.处理动态网页和APP数据，解决反爬虫技术问题。
4.清洗、解析和结构化抓取的数据，确保数据质量。
5.维护和升级现有爬虫系统，快速响应业务需求变化。
6.参与分布式爬虫架构设计，解决任务调度和数据同步问题。
7.与数据工程、产品团队协作，确保数据可追溯和合规使用。
岗位职权
1.自主选择爬虫技术和工具（如Python、Scrapy、Selenium等）。
2.制定数据抓取策略和反爬虫绕过方案。
3.访问和操作公司内部数据存储系统（如MySQL、MongoDB）。
4.提出技术改进建议，参与系统架构优化决策。
5.协调跨部门资源，推动数据采集项目落地。
岗位责任
1.确保数据采集合法合规，遵守网站政策和隐私保护法规。
2.维护系统稳定性，及时处理爬虫故障和警报。
3.保证数据质量，避免重复和错误信息。
4.优化性能，减少资源消耗，提升抓取效率。
5.文档编写，记录技术方案和系统维护日志。
任职要求
？教育背景？：
计算机科学、信息技术或相关专业本科及以上学历。
？技能要求？：
1.精通Python编程，熟悉JS逆向和动态内容处理。
2.熟练使用Scrapy、BeautifulSoup、Selenium等框架。
3.熟悉HTTP/TCP/IP协议，具备抓包工具（如Charles）使用经验。
4.掌握数据库知识（MySQL、MongoDB），能设计数据存储方案。
5.具备反爬虫问题解决能力（如验证码、IP限制）。
6.？经验要求？：有爬虫开发经验，有android或者IOS逆向经历者优先。
7.？软技能？：逻辑分析能力强，学习意愿高，团队协作良好。

湖南向上商旅服务有限公司，注册资金1000万元，是经中国民航总局、中国航空运输协会、国际航空运输协会批准的一类航空机票代理销售企业，主营国内、国际航空客票预订服务。
公司始创于2006年，与各大航空公司建立了长期稳定的合作伙伴关系，拥有最完善的国内机票预订管理系统和最专业的机票预订员。市内唯一一家线上线下同步运营的航空机票代理销售企业，年营业额、机票预订量省内领先，各大航司中南地区核心代理。

联系地址：金荣国际工业园B1栋