技能标签
专业技能
精通Python开发与分布式计算框架(Spark/Hadoop/Hive),擅长数仓架构设计与ETL流程优化,具备机器学习模型开发与数据挖掘算法应用能力。熟练掌握数据清洗、数据建模、数据可视化等全链路数据处理技术,熟悉自动化运维工具开发及办公自动化系统构建。
工作履历(脱敏处理)
长期从事大数据平台架构设计与开发工作,主导构建分布式数据处理体系,实现PB级数据实时分析。设计并实施ETL流程优化方案,提升数据处理效率30%。开发自动化运维工具降低系统维护成本,实现运维效率提升40%。主导建设企业级数据仓库,支持多维数据分析与可视化展示。开发数据挖掘算法模型,提升业务决策准确性。设计并实施数据清洗与存储方案,确保数据一致性与完整性。
项目经验(脱敏处理)
1. 构建分布式数据分析平台:基于Hadoop生态搭建PB级数据处理系统,采用Spark流式计算实现实时数据处理,支撑企业级业务分析需求。
2. 农业数据平台开发:设计ETL流程优化方案,通过Spark进行数据清洗与聚合,建立统一数据仓库,提升数据可用性。
3. 工单自动派单系统:开发基于规则引擎的自动化派单机器人,集成钉钉API实现工单流转自动化,提升运维效率。
4. 大宗商品数据采集系统:构建网页爬虫系统,通过ETL流程清洗数据并存储至分布式数据库,实现历史数据完整归档。
5. 生鲜超市资产管理平台:设计数据模型管理消耗型资产,通过数据可视化实现资产全生命周期监控,降低运营成本。
6. 数据挖掘与模型开发:开发机器学习模型用于用户行为预测,提升业务决策准确性,支持精准营销策略制定。
7. 3D动画数据处理系统:构建自动化渲染流程,通过分布式计算框架优化动画数据处理效率,实现批量渲染任务自动化。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
10年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接