实现网
天边*流星

昵称登录后显示

800/8小时
15年工作经验

拓维信息系统股份有限公司
高级java开发

大汉集团
高级java开发/大数据工程师

springcloud体系
hadoop体系
数据仓库建设

0

被预约次数

0

被收藏次数

0

被评价次数

擅长技能

Java 基础与并发:熟练掌握 Java 基础知识,对集合、线程有深入理解,编码规范且习惯良好。

大数据技术:掌握大数据平台环境的搭建、调优与运维,同时具备 CDH 和原生 Apache Hadoop 集群的部署与管理经验。深入理解数据仓库理论与建模方法,包括维度建模、数据分层(ODS/DWD/DWS/ADS)、ETL 开发全流程设计与实施。擅长使用 Hive on Spark 进行大规模数据处理,对 Hive 和 Spark 引擎有深入的性能调优经验,包括但不限于解决数据倾斜、小文件合并、资源配置优化等生产环境高频问题,确保数据任务的效率与稳定。

框架与微服务:熟悉 MyBatis、SpringBoot 等核心框架,可快速构建项目,研读源码理解 Spring Bean 生命周期、循环依赖及自动装配原理。熟悉 Spring Cloud、SpringCloud Alibaba、Dubbo 等微服务框架,具备线上微服务项目实战经验。

数据库与缓存:精通 SQL 语言和 MySQL 调优,参与过线上项目 SQL 优化。深入理解 Redis,熟悉其数据持久化、多数据类型应用及分布式锁实现

消息中间件与运维:熟练掌握 Kafka、RocketMQ 等消息中间件及集群部署,对消息丢失、重复消费等问题有实际处理经验。熟悉 Linux 系统及命令操作,有Docker使用经验,能应对中间件运维及系统管理需求,保障服务稳定运行

其他:丰富的数据采集、报表开发、大屏开发经验,熟练使用永洪BI、帆软等报表制作工作

项目经验

项目名称 :悦云数据仓库
技术架构:sqoop、hadoop、hive、spark、zookeeper、flume、kafka、atlas、azkaban
本项目构建了支撑复杂业务场景的企业级数据仓库平台,覆盖17个商业综合体及96个物业项目,实现从数据采集、存储计算、治理应用到高可用保障的全流程闭环管理。核心架构与流程如下:

全域数据建模与规范治理:
统一建模: 采用维度建模方法论,设计覆盖商业招商、物业运维、能耗管理等8大核心业务域的总线矩阵,清晰定义核心数据实体(如租户、设备、空间、工单、能耗单元)及其关联关系,支撑跨域分析。
规范先行: 制定并强制执行涵盖数据命名、质量管控(完整性、准确性、一致性)、安全分级与访问控制的数据开发与管理规范,为数据资产化奠定基础。

高性能存储与计算引擎:
技术栈: 基于 Hadoop (HDFS) 提供海量数据存储能力,采用 Spark 作为核心分布式计算引擎。
计算优化: 主要依托 Hive on Spark 执行大规模离线批处理,高效支撑日均亿级数据记录处理及峰值QPS12万+ 的复杂分析需求。

多源异构数据集成 (ETL):
实时流接入 (毫秒级):
设计并部署前后端埋点框架,采集商圈客流、物业工单、水电计量、停车流水等核心场景行为日志,日均采集量达2TB+。
利用 Flume + Kafka 构建高吞吐、低延迟(毫秒级)的实时数据管道,确保行为日志快速入仓。
批量数据同步 (小时级):
调度 Sqoop 作业,抽取多个业务系统(ERP, CRM, IoT平台等)的结构化数据。
结合 Flume 完成日志类等半结构化/非结构化数据的批量采集。
实现关键业务系统数据小时级增量/全量同步入仓。

分层建模与数据治理:
主题域模型: 在数据仓库明细层 (DWD),针对关键业务概念(如用户全域视图、房间全生命周期)构建强一致性、整合多源数据的主题模型,有效解决商业系统与物业系统间的数据歧义问题。
血缘与影响分析: 集成 Apache Atlas,实现字段级数据血缘追踪,支持数据溯源、影响分析和合规审计。

数据驱动业务增长(精准营销)
DMP平台建设:基于DWS层搭建用户数据平台,利用 RFM模型+聚类算法动态生成百万会员画像
精准营销闭环: 解析 "大汉新生活"APP亿级别行为日志,识别用户消费偏好与活跃时段;设计商圈优惠券定向推送策略(基于地理位置+消费等级),推动会员季度复购率

--------------------------------------------------------------------------------------------------------------------------------

项目名称:大汉物业云(物业管理ERP系统)
技术架构:spring cloud alibaba、mybatis plus、redis、nacos、feign、sentinel、rocketMQ、Zipkin、Nginx
项目描述:智慧物业管理方案是为集团性企业进行资产管理的解决方案。系统通过费效管理,业财一体等数字化手段帮助集团远程监控物业资产,真正实现人员在线、组织在线、业务在线,为集团降本增效。
技术设计:深度参与核心模块需求评审,结合业务场景制定精细化落地方案,确保业务流程闭环。部署基于 Redis 的缓存及分布式锁方案,提升系统响应速度;同时主导代码 review 与接口优化,保障系统高效稳定运行。

业务开发:
独立承担报事报修、装修管理后端模块的全流程开发,从需求分析到功能实现,确保模块贴合业务实际。搭建主数据管理平台,完成项目、楼栋、楼层、物业管理人员等核心主数据的开发及下发 API 实现,保障基础数据高效流转,为物业资产在线化管理提供坚实数据支撑。

基于数仓、用友财务数据,构建替换用友对应的财务板块,为集团财务部大幅降低工作量,年节省10万+续约费用。

数据集成:基于数据仓库架构开发各类复杂业务报表与可视化业务大屏,直观呈现物业运营数据打通永洪 BI 系统与物业云平台,实现用户信息及权限的自动同步,将报表无缝集成至物业云,让用户无需切换系统即可无感知查阅数据,助力集团远程监控资产状态与科学决策。

--------------------------------------------------------------------------------------------------------------------------------

项目名称 :大汉新生活(商圈小程序电商)
技术架构:spring cloud alibaba、mybatis plus、redis、nacos、feign、sentinel、rocketMQ、Zipkin、Nginx
1、核心模块开发:独立负责优选好货、精选套餐及助力模块开发,保障用户选购商品与服务的核心流程顺畅。深度参与停车券模块开发,协同完善商圈消费配套功能,通过模块化开发提升用户体验与平台实用性,为商圈电商生态搭建基础框架

2、技术优化实现:基于分类算法构建用户画像,成功落地悦友模块,实现精准化服务推荐。采用 Redis 实现缓存与锁机制,支撑 2023 年大汉工匠院非遗年消费券抢购,高效应对高并发场景,运用 Sentinel 组件配置服务限流异常熔断与降级策略,解决微服务架构下的服务雪崩问题,保障活动稳定有序,提升平台技术承载力。

3、协同项目推进:参与需求评审,结合业务场景制定合理开发计划,确保项目节奏可控。跨模块协作中,主动衔接各功能板块,协调解决开发难点,推动整体项目按节点落地,助力商圈线上电商平台

0条评论 雇主评价

暂无评论~

可兼职时间

自由职业者,时间充裕

可兼职地点

长沙
湖南全境

被预约

0

被收藏

0

被评价

0

立即预约

可兼职时间

自由职业者,时间充裕

可兼职地点

长沙
湖南全境