IT人力外包人才简历库

精通Java语言及JVM调优，掌握Spring Boot、Spring Cloud微服务架构，熟悉分布式系统开发。精通Hadoop生态体系（HDFS、YARN、MapReduce），熟练使用Spark SQL/Streaming进行实时计算。精通HBase、Redis等NoSQL数据库，具备分布式数据库设计经验。掌握数据挖掘算法（聚类、分类、回归预测），熟悉机器学习框架（TensorFlow/PyTorch）。精通Linux系统运维及Shell脚本开发，具备大数据平台搭建经验。熟悉ETL流程设计与数据建模，掌握数据可视化工具。

主导某科技公司数据中台架构设计，采用Spring Cloud搭建微服务架构，实现用户中心单点登录系统（OAuth2.0）。设计物联网大数据平台，通过Flume采集日志数据至Kafka，使用Spark Streaming实时处理并存储至HDFS。开发推荐系统核心模块，基于Spark MLlib实现协同过滤算法，构建用户画像标签体系。优化数据处理流程，通过Parquet格式存储和小文件合并提升存储效率30%。设计数据推送系统，采用gRPC接口实现多端数据同步，支撑千万级用户实时推荐。

1. 数据中台微服务架构：基于Spring Cloud搭建分布式系统，采用OAuth2.0实现单点登录，设计高并发用户鉴权模块，支撑日均百万级访问量。

2. 物联网大数据平台：构建日志采集-处理-存储体系，使用Flume采集Nginx日志至Kafka，通过Spark Streaming实时处理，采用Parquet格式按日期分区存储至HDFS，优化小文件合并策略提升存储效率。

3. 推荐系统开发：基于Spark SQL实现MongoDB数据同步至HDFS，构建用户画像标签体系，采用HBase存储用户行为数据。设计协同过滤推荐算法，通过Spark MLlib实现个性化推荐，支撑千万级用户实时推送，提升点击率15%。