IT人力外包人才简历库

返回列表

Python自动化与数据采集工程师

驻场外包人员
工作年限:5年 意向城市:杭州 浏览:2次 发布时间:近期

技能标签

Python开发 自动化测试 RPA开发 反爬虫技术 数据采集 网络请求 数据处理 分布式爬虫 OCR识别 数据库管理 接口调试 系统集成 异常处理 日志分析 性能优化

专业技能

精通Python编程语言,具备完整的开发能力与工程化实践。熟练掌握自动化测试框架(如PyTest、Selenium),擅长构建数据采集系统。精通反爬虫技术体系,包括IP代理池构建、请求头模拟、验证码识别等。熟悉RPA开发工具(如UiPath),具备自动化流程设计与实现能力。熟练使用Requests/Playwright进行网络请求,掌握正则表达式(re)与数据解析技术。精通Pandas/NumPy数据处理,熟悉MySQL数据库设计与优化。具备分布式爬虫框架(如Scrapy-Redis)开发经验。

工作履历(脱敏处理)

主要负责企业级自动化测试平台开发,主导设计基于Python的RPA流程,实现业务系统自动化操作,提升工作效率40%。构建反爬虫技术体系,成功突破多个网站的防护机制,完成历史数据采集系统开发。开发数据处理模块,优化数据清洗流程,使数据处理效率提升3倍。设计分布式爬虫架构,支持百万级数据采集,保障系统稳定性与扩展性。持续优化自动化测试框架,提升测试覆盖率与执行效率,降低人工干预成本。

项目经验(脱敏处理)

全国空气质量历史数据采集项目:针对目标网站的动态渲染反爬机制,采用Playwright实现浏览器自动化,结合OCR技术破解验证码。构建分布式爬虫框架,部署IP代理池与请求头模拟策略,突破反爬虫防护。开发数据解析模块,使用Pandas进行数据清洗与结构化处理,最终实现全量历史数据采集。项目采用微服务架构,通过消息队列实现任务分发,保障系统高并发处理能力,最终完成1000+城市空气质量数据的完整采集。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

5年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接