技能标签
专业技能
精通Java编程语言,掌握面向对象设计、多线程编程、网络通信等核心技术。熟悉JDBC、DBUtils、DBCP连接池等数据库访问技术,具备MySQL、Oracle等关系型数据库及Redis内存数据库的开发经验。熟练使用Spring Boot、Spring Cloud微服务框架,掌握Spark SQL、Spark MLlib等大数据处理框架。具备Hadoop生态组件(HDFS、YARN)开发经验,熟悉Flume、Kafka、HBase等大数据技术栈。精通机器学习算法(神经网络、支持向量机、协同过滤)及数据挖掘技术,熟悉数据预处理、特征工程及模型优化方法。
工作履历(脱敏处理)
长期从事大数据平台架构设计与算法开发工作,主导搭建企业级数据中台微服务架构,实现用户中心单点登录系统。开发物联网大数据分析平台,构建支持千万级设备数据实时处理的分布式系统。设计并实现智能推荐系统,采用Spark SQL进行多源数据同步,通过Flume采集日志数据至Kafka,使用Parquet格式存储至HDFS。研发用户画像计算系统,基于Spark MLlib实现协同过滤推荐算法,通过HBase存储推荐结果。优化数据推送服务,采用gRPC协议实现高并发接口调用,提升系统响应性能30%。
项目经验(脱敏处理)
1. 构建企业级数据中台微服务架构,设计并实现用户中心单点登录系统(OAuth2.0协议),支持百万级用户并发访问,系统可用性达99.99%。
2. 开发物联网大数据分析平台,采用Flume采集Nginx日志数据至Kafka,通过Spark Streaming实现实时数据处理,支持每秒10万+数据吞吐量。
3. 设计智能推荐系统架构,使用Spark SQL从MongoDB同步业务数据至HDFS,基于Parquet格式按日期分区存储,优化数据合并策略降低存储成本40%。
4. 实现用户画像计算系统,通过Spark MLlib构建协同过滤推荐模型,采用HBase存储用户标签数据,支持实时推荐计算响应时间<200ms。
5. 开发数据推送服务,基于gRPC协议实现高并发接口调用,优化网络传输效率,系统TPS提升至5000+,支持百万级用户画像匹配计算。
驻场外包优势
服从性高
严格遵守甲方管理制度
技术扎实
5年项目实战经验
可长期驻场
接受异地项目外派
快速响应
24小时内可到岗
企业人才对接
专业IT人力外包服务
如果贵公司有IT项目人手缺口、需要工程师驻场开发、短期人力支援需求,欢迎联系洽谈合作。
合作热线
18969108718
商务邮箱
ntit@163.com
微信扫码咨询
扫描二维码添加商务对接