技能标签
专业技能
精通Hadoop分布式计算框架(HDFS/MapReduce/YARN),掌握Hive/Spark/Flink实时计算引擎,熟悉HBase/Kafka/Redis分布式存储系统,精通SQL优化与复杂查询,具备数仓分层建模(ODS/DWD/DWS)经验,熟练使用Tableau/PowerBI等BI工具,掌握Python/Shell脚本开发,具备Linux系统运维及日志分析能力
工作履历(脱敏处理)
专注于大数据平台架构设计与开发,主导完成多个数据仓库项目,涵盖数据模型设计、ETL流程开发、数据质量监控等核心模块。主导优化Hive/Spark计算引擎,通过分区策略调整和缓存机制优化,使数据处理效率提升30%。参与搭建数据中台架构,设计统一数据接入标准,实现多业务系统数据整合。具备丰富的数据治理经验,建立数据血缘追踪和质量评估体系,保障数据平台稳定运行。
项目经验(脱敏处理)
主导短视频业务数据仓库建设,完成从数据采集到报表开发的全链路设计,采用分层架构(ODS/DWD/DWS)提升数据复用效率,通过Spark+Hive优化ETL流程,使数据处理时效提升40%。设计分布式任务调度框架,实现千级任务自动编排与监控,降低运维成本。构建数据质量监控体系,建立数据血缘追踪机制,保障数据准确性与一致性。开发数据可视化平台,集成Tableau+Superset,实现业务指标实时看板,支撑运营决策。主导数据平台高可用架构设计,通过主从集群+故障转移机制保障系统稳定性。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
6年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接