简历编号:1270945702

更新日期:2024-04-09 15:28

打印简历(A4)

程先生

目前所在: 广州市 年  龄: 32 个人照片
户口所在: 江西省  国  籍:
婚姻状况: 未婚 民  族: 汉族
人才测评: 未测评 身  高:
我的特长: 体  重:
您还没有登录,需要登录后才能查看求职简历详细资料。
招聘帐号: 登录密码:

◆ 求职意向

行业意向: 信息传输、软件和信息技术服务业 
人才类型: 普通求职 
应聘职位: 软件工程师:大数据开发,软件工程师:大数据开发,软件工程师:大数据开发运维 职  称: 无职称
工作年限: 9 参加工作日期: 2014-07
求职类型: 全职 可到职日期: 随时
月薪要求: 8000~11999元 希望工作地区: 广州市,,

◆ 工作经历

中软国际广州分公司   起止年月:2023-11 ~ 2024-01
公司性质: 私营企业  所属行业:信息传输、软件和信息技术服务业
担任职位: 大数据开发
工作描述: 项目简介:
Biostime合生元数仓项目属于电商平台的数仓平台,使用DataPhin大数据平台用于实现对Biostime合生元商品销售量和用户数据的深度分析,从而为线上商城的运营提供有力的支持。同时,也可以利用数仓的数据分析结果,更好地理解用户的行为和喜好,制定针对特定用户群体的精准营销策略,制定优惠策略,推送用户感兴趣的商品,最终提高平台产品的交易成功率。
项目职责:
     1、负责建设电商数据仓库体系,包括数据模型设计、ETL调度、性能优化等。
     2、负责数据提取和报表建设工作,为业务方输出数据价值。
     3、建设和完善数据字典,建立完善的元数据管理规范。
     4、跟进数据上报需求的进度,推动需求进行,包括开发进度、测试进度、日志校验进度。
     5、解决业务方在使用数据过程中遇到的问题。
工作内容:
     1、负责数据集成同步。通过DataPhin大数据平台的离线管道功能将数据源表数据进行迁移。
     2、负责数仓模型的搭建。使用Oracle SQL进行数据仓库的HH ODS层、HH DWD层、HH DWS层、HH ADS层数据仓库的创建。
     3、负责HH_ODS层数据的清洗过滤操作。使用Oracle SQL对HH_ODS层的订单表、订单明细表、商品表等数据进行过滤、清洗,区分维度表和事实表。
     4、参与处理用户的行为数据和实时业务日志。采用Flink对用户行为数据进行处理,计算出PV和UV等用户行为数据,将用户行为数据存储到HH DWD层中存储。
     5、进行 SIT 测试和UAT 测试,并协助同事完成系统上线,如果发现 BUG 也会帮忙定位分析 、解决。
     6、协助同事使用报表工具PowerBI处理PBI ADS模型层数据,将报表生成图表展示。
离职原因:
广东胜通和科技服务有限公司   起止年月:2023-07 ~ 2023-08
公司性质: 国有企业  所属行业:信息传输、软件和信息技术服务业
担任职位: ETL工程师
工作描述: 项目简介:
     利用数据仓库和商务智能技术实现企业信息共享,提供企业决策支持信息,促进企业发展。它是企业的业务系统与数据资源进行集中、集成、共享、分析的场地、工具、流程等的有机组合。
项目职责:
     1、负责重要工具运行监控汇报监控情况,编制相关文档。
     2、负责运行过程中资源调配,及时响应问题处理。
     3、负责日常运行问题分析处理,形成闭环。
     4、负责与用户沟通并确定问题全过程跟踪闭环,确保用户问题有效落实。
工作内容:
    通过全链路监控平台监控有资源、大数据组件、作业、数据库,从最基础的服务器、电脑程序、网络等整个监控,比如资源监控里面涉及到一些服务器、进程(OGG、KAFKA-FLOW)之类的,用这些工具进行数据传输,找出一些异常问题,然后业务的作业,采集、计算、推送、其它、工厂之类的,例如ETL调度平台出现重点保障作业未按计划时间跑完问题,处理方式:首先查看作业状态、日志以及前置任务,先自己分析问题,如果自身无法分析出问题,可以协助各专业人员分析问题原因并及时处理,最终形成报表。涉及数据库,数据库有一些集群,MySQL集市库、MPP集群等。还有一些专项指标、涉及前端,元数据,硬件等出现的问题最终形成工单。
     交接班时候,上班时,首先阅览交接文档,与上一班值班人员交接内容:注意事项、现场值班人员情况、问题处理进度等。下班时,根据交接文档中填写的内容与下一班值班人说清楚注意事项、任务处理进度等情况,然后将交接文档以及交班时需要整理的两个表发送至对应的群里即可。
离职原因: 个人发展规划
广州龙希信息科技有限公司   起止年月:2019-10 ~ 2022-10
公司性质:   所属行业:信息传输、软件和信息技术服务业
担任职位: 大数据开发
工作描述: 项目简介:
     全部从销售接单到生产排单到原材料采购到供应商供货、备料到生产线线上生产,生产线上会有检测,各种检测设备显示设备状态,完成率、成品率上报到系统,然后出货、交货,数据中台收集整个生产线所有系统(ERP、OA、MES、APS、WMS等)数据,了解业务形态之后,根据报表展现形式,可能按部门维、时间维、产品类型维去分类,形成这种数据模型,通过这些数据为领导或业务部门展现一些指标或者报表。
工作内容:
     1、分析需求文档,熟悉业务需求 ,还有确认取数逻辑,参与数据模型设计等。
     2、使用美的美云智数一站式开发平台通过数据采集功能将各个业务系统的数据抽取数据(清洗和处理数据)到中台Apache Doris数据库 。
     3、使用美的美云智数一站式开发平台通过数据处理功能新建任务,创建转换添加脚本 ,设置合理的作业配置 ,实现数据同步更新,对于增量数据每天进行失效判断,更新对应时间,全量数据抽取到ODS 层中进行数据优化整合,然后建立 DW 层 ,后 期 重点 监 控 DW 层 的 数 据 增 量 更 新,最后分析需求指标在 DM 层建立各种数据模型 。
     4、进行 SIT 测试和UAT 测试,并协助同事完成系统上线,如果发现 BUG 也会帮忙定位分析 、解决。
     5、使用美的美云智数可视化开发平台处理模型层数据,将报表生成图表展示。
离职原因:
广州普州商务服务有限公司   起止年月:2014-09 ~ 2019-09
公司性质:   所属行业:
担任职位: IT运维/技术支持
工作描述: 1、负责中铁施工企业及建筑、地产、市政、路桥、园区等行业的项目需求调研、分析和应用解决方案。
2、负责中铁工程项目综合管理系统、工程项目成本管理信息系统及业财共享平台等系统软件的实施工作,系统软件的安装、调试、用户培训、实施上线等服务。
3、负责对系统软件项目上线前期数据准备指导工作;
4、承担中铁施工企业员工的系统软件培训和工程实施指导;
5、完成项目实施规范以及部门和公司相关的文档规定要求,及时主动反馈工作进度。
6、配合中铁施工企业领导及项目经理做好客户关系维护工作。
离职原因:

◆ 教育背景

毕业院校: 中国地质大学长城学院 最高学历: 本科  获得学位:
教育开始日期: 2010-09 毕业日期: 2014-07
专 业 一: 信息管理和信息系统 专 业 二:

◆ 语言能力

外语: 英语 良好 粤语水平: 一般
其它外语能力:
国语水平: 优秀

◆ 工作能力及其他专长

技能证书  Skills certificate
计算机一级、企业人力资源管理师三级、C1 驾驶证、普通话水平二级乙等

个人技能  Personal Skills
熟悉 MySQL、Oracle 数据库,熟练掌握数据仓库架构设计、数据建模
精通 SQL 语言,熟练掌握增删改查、存储过程编写以及 SQL 优化等操作
熟悉 ETL 流程,能熟练使用 Kettle 工具,对数据抽取,清洗,转换和作业调配
熟悉 Jenkins 持续集成工具,能在 Jenkins 上实现定时 ETL 抽取数据
熟悉 Linux 系统以及 Linux 常用命令和 CRT、Xshell 等连接工具操作
掌握 hadoop,能用 HiveSQL 工具对数据进行清洗和处理,熟悉 hive 数据仓库
熟练运用 PowerBI 可视化软件生成数据图表,掌握 PowerDesigner 建模工具
掌握 Shell 脚本的使用,能够编写 Shell 脚本文件,利用 Crontab 实现定时调度任务

项目经验Project experience
* 项目一:“跨越领鲜”电商平台项目分析
项目简介:
基于“跨越领鲜”电商平台,通过日 PV 和日 UV 分析,流量漏斗转化率分析,复购行为分析,用户跳失率分析和用户价值 RFM 分析等指标,对平台用户行为进行分析,实现精准营销,为后面广告投放,运营活动等提供数据。 项目职责:
1、参与需求分析,确认业务来源以及需求,包括总体流量、每日流量、流量漏斗转化率、用户行为转化率等,还有确认取数逻辑,参与数据模型设计。
2、使用 ETL 工具 Kettle 从业务系统抽取数据到数据仓库的 ODS 层,编写存储过程实现同步数据。
3、把 ODS 层的数据进行清洗整合,区分事实表跟维度表,把订单信息表、订单状态表、收藏表等事实表放到 DW 层,把商品表、商品分类表、广告表等维度表放到 MD 层,编写存储过程方便后期进行调度。
4、根据项目的需求,对 DM 层进行开发,编写 SQL 存储过程得到总下单量、每日下单量、转化率等数据,完成客户的需求,提供数据给做报表的同事。
5、进行 UT 测试,并协助同事完成上线,如果发现 BUG 也会帮忙定位、分析、解决。
6、设置合理的作业配置,制定定时调度。

* 项目二:广州农商银行科学城支行借贷的客户分析项目
项目简介:
通过分析各个维度的不良贷款率情况和放贷比例,从不同性别,不同年龄,不同学历以及是否认证个人信息等方面进行分析,帮助企业降低坏账率,为银行决定放贷与否及放贷额度提供技术分析,给出相应的数据支撑与技术指导。
项目职责:
1、参与需求讨论,查看数据字典,确认需求,指标,设计项目的总体流程。
2、利用 Sqoop 命令把业务系统的数据从 MySQL 导入到 HDFS 中的 ODS 层。
3、基于 HiveSQL 工具来进行清洗和处理数据,将空数据转换或删除,对 ODS 层分类整合,将维度表放入 DIM 层,并根据表的主题进行分类建设 DWD 层。
4、完成从 DWD 层、DIM 层到 DWS(轻度汇总)层的数据模型建立,为 ADS 层的指标所用数据做基础建设。根据业务需求在 DWS 层基础上建设 ADS 层。
5、使用 Sqoop 将 ADS 层结果数据导出到业务系统的数据库 MySQL。
6、先进行单元测试,之后协助测试工程师进行充分测试,确保功能的实现。

* 项目三:广州健民医药销售数据分析项目
项目简介:
根据药店销售数据,分析药品销售关键指标,从用户数,人均消费,各时
段消费情况比较等方面来分析客户购买能力,为药店加强货品管理提供技术支持。
项目职责:
1、分析需求文档,熟悉业务需求。
2、利用 ETL 工具 Kettle 抽取数据(清洗数据)到数据仓库中的 ODS 层。
3、在 ODS 层中进行数据优化整合,建立 DW 层、MD 层。
4、分析需求指标建立 DM 层,建立消费模型,时间维度模型,编写存储过程。
5、利用 ETL 工具创建转换,调用存储过程,创建作业,实现数据同步更新。
6、利用报表工具 PowerBI,将完成的数据模型进行处理,制作成报表。

* 项目四:首汽约车打车数据分析
项目简介:
主要用 Hadoop 来搭建网约车数据分析系统,收集不同时间段、不同城市、不同车
型等下单数据,建立基于各种时间、价格维度指标的数据模型,得出不同客户行为偏好,
为公司的决策提供技术支持。
项目职责:
1、参与需求分析,整理分析逻辑,编写、维护数据字典,对数据仓库进行设计开发。
2、与业务方进行沟通,明确产品需求,设计项目流程。
3、通过 Sqoop 命令采集业务系统数据到 HDFS 中的 ODS 层,根据需求框架在数据,仓库 ODS 层取数,并进行数据更新。
4、基于 HiveSQL 工具来进行清洗和处理数据,将空数据转换或删除,导入事实表到DWD 层,把维度表导入 DIM 层。
5、编写 Shell 脚本执行 HSQL,并使用 Crontab 定时调度,完成从 DWD 层、DIM层到 DWS(轻度汇总)层的数据模型建立,并根据指标完成 ADS 层的汇总,使用 Sqoop将 ADS 层结果数据导出到业务系统的数据库 MySQL。
6、独立完成 UT 测试,对数据报表进行开发,按照项目需求输出相应的数据模型。

◆ 详细个人自传

1、熟练掌握 Oracle、MySQL 数据库操作;熟悉 SQL 语句,熟练掌握增删改查、存储过程编写以及 SQL 优化等操作。
2、熟练应用 ETL 工具;熟悉 Linux 常用命令。
3、熟悉 Hadoop大数据生态圈,能用 HiveSQL 工具对数据进行清洗和处理。
4、逻辑思维能力强,思路清楚,学习能力强,对新技术有着强烈的好奇心,喜欢浏览arXiv,StackOverflow,Segmentfault等网站。
5、善于与人沟通,对工作尽职尽责,能承受一定的工作压力,乐于从事有挑战性的工作。
6、具有较强的团队合作意识,能快速融入团队。
7、工作态度认真负责,做事严谨。
8、兴趣爱好广泛,例如阅读、社交、旅游等。