IT人力外包人才简历库

返回列表

大数据开发工程师(Hadoop/Spark方向)

驻场外包人员
工作年限:6年 意向城市:上海 浏览:2次 发布时间:近期

技能标签

Hadoop Spark Hive HBase Kafka SQL BI工具 Python Shell 数据仓库 数仓建模 数据治理 ETL开发 分布式计算

专业技能

精通Hadoop分布式计算框架(HDFS/MapReduce/YARN),掌握Hive/Spark/Flink实时计算引擎,熟悉HBase/Kafka/Redis分布式存储系统,精通SQL优化与复杂查询,具备数仓分层建模(ODS/DWD/DWS)经验,熟练使用Tableau/PowerBI等BI工具,掌握Python/Shell脚本开发,具备Linux系统运维及日志分析能力

工作履历(脱敏处理)

专注于大数据平台架构设计与开发,主导完成多个数据仓库项目,涵盖数据模型设计、ETL流程开发、数据质量监控等核心模块。主导优化Hive/Spark计算引擎,通过分区策略调整和缓存机制优化,使数据处理效率提升30%。参与搭建数据中台架构,设计统一数据接入标准,实现多业务系统数据整合。具备丰富的数据治理经验,建立数据血缘追踪和质量评估体系,保障数据平台稳定运行。

项目经验(脱敏处理)

主导短视频业务数据仓库建设,完成从数据采集到报表开发的全链路设计,采用分层架构(ODS/DWD/DWS)提升数据复用效率,通过Spark+Hive优化ETL流程,使数据处理时效提升40%。设计分布式任务调度框架,实现千级任务自动编排与监控,降低运维成本。构建数据质量监控体系,建立数据血缘追踪机制,保障数据准确性与一致性。开发数据可视化平台,集成Tableau+Superset,实现业务指标实时看板,支撑运营决策。主导数据平台高可用架构设计,通过主从集群+故障转移机制保障系统稳定性。

驻场外包优势

服从性高

严格遵守甲方管理制度

技术扎实

6年项目实战经验

可长期驻场

接受异地项目外派

快速响应

24小时内可到岗

企业人才对接

专业IT人力外包服务

如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。

合作热线

18969108718

商务邮箱

ntit@163.com

微信扫码咨询

微信咨询二维码

扫描二维码添加商务对接

立即申请人才对接