IT人力外包人才简历库

返回列表

大数据开发工程师

驻场外包人员
工作年限:2年 意向城市:杭州 浏览:3次 发布时间:近期

技能标签

大数据开发 Hadoop Spark HBase MySQL Java Linux ETL 数据仓库 分布式系统 Shell脚本 日志分析 性能调优 数据中台 数据采集 数据存储

专业技能

精通Hadoop生态体系(HDFS、MapReduce、YARN),熟悉HBase、MySQL等大数据存储系统,具备数据仓库设计与ETL开发经验。熟练掌握Java编程语言(Spring Boot、MyBatis),具备分布式系统开发能力。熟悉Linux系统运维及服务器部署,精通Shell脚本编写,具备日志分析与性能调优经验。

工作履历(脱敏处理)

主导数据中台产品开发,完成数据采集、存储、计算架构设计,采用Hadoop生态体系实现日均10亿条数据处理。基于HBase构建实时数据存储层,通过优化Region分布策略提升查询性能30%。开发ETL调度系统,采用Spark实现数据清洗与聚合,降低计算资源消耗40%。搭建Linux服务器集群,编写自动化部署脚本,提升系统部署效率50%。持续优化HDFS存储策略,通过数据分区与压缩技术降低存储成本25%。

项目经验(脱敏处理)

数据中台项目:设计并实现企业级数据中台架构,采用Hadoop+HBase+MySQL混合存储方案,解决多源异构数据整合难题。开发分布式ETL调度系统,基于Spark实现数据清洗与聚合,优化后数据处理效率提升3倍。构建实时数据处理流水线,通过HBase快照功能实现数据一致性保障,系统可用性达到99.99%。设计数据质量监控体系,开发基于Prometheus的监控告警系统,实现异常数据实时预警。优化HDFS存储架构,采用Snappy压缩算法降低存储成本25%,并设计数据生命周期管理策略。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

2年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接