技能标签
专业技能
精通Python编程语言，熟悉Scrapy、PySpider等爬虫框架，具备分布式爬虫系统架构设计能力。熟练使用RPA工具实现业务流程自动化，掌握MySQL/Redis数据库优化技术。熟悉数据清洗、ETL流程设计，具备API接口开发与维护经验，了解Linux系统运维及日志分析技术。
工作履历（脱敏处理）
曾主导搭建日均处理200万条数据的分布式爬虫系统，采用Scrapy-Redis实现任务分发与结果聚合。设计RPA自动化方案替代人工操作，使业务处理效率提升60%。开发数据清洗模块优化ETL流程，将数据处理时效提升40%。维护公司核心API接口，保障系统高可用性，支持日均10万+请求量。
项目经验（脱敏处理）
构建分布式爬虫系统：设计基于Scrapy-Redis的分布式架构，采用Selenium处理动态渲染页面，通过分布式队列实现任务负载均衡。解决反爬虫机制，使用代理IP池和请求头随机化策略，成功突破目标网站的流量限制。开发RPA自动化流程：基于UiPath实现业务流程自动化，集成数据库和API接口，减少人工操作时间70%。优化数据处理管道：设计数据清洗规则，使用Pandas进行数据标准化处理，通过Apache Nifi实现数据流自动化传输，提升整体数据处理效率。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
4年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求，欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接