职位概述
- 1、配合公司战略规划,协调公司相关资源配置,推动公司数据治理体系建设。
2、理解公司内部各类业务具体内容和实际数据结构,牵头相关方建立健全公司层面覆盖设备运维等各方面的统一数据标准,推动公司数据标准体系和统一数据字典的建设与落地。
3、根据公司的规划,组织相关部门的资源,协调业务部门与技术中心推动公司统一数据平台建设与落地。
4、牵头建立公司层面数据质量管理机制,组织制定数据质量规则,建立健全数据质量监控体系,并组织相关部门不断提升数据质量。
5、负责数据清洗相关策略工作,包括对错误、重复、低质等数据的发现及处理,提升数据服务的质量
6、以数据质量和健康度为驱动,梳理高效的分析方法,并结合用户应用场景,建立业务指导方向和打法
7、负责数据治理类项目的开展实施,梳理数据资产,提高业务系统的数据质量。
8. 负责公司大数据分析平台的设计和开发。
1、全日制本科及以上,计算机相关专业,5年以上大数据开发、大数据建模相关经验。
2、熟练掌握完整处理流程包括采集、清洗、预处理、存储、分析挖掘。
3、熟练掌握数仓迁移完整流程包括范围分析、环境准备、数据模型迁移、脚本迁移、调度迁移、数据一致性校验、系统及应用切换。
4、熟练掌握主流建模理论包括纬度建模、范式建模等。
5、熟练掌握主流引擎特点及差异包括hive/spark/hbase/presto/es/kylin/oracle/mysql等。
6、熟悉机器学习常用算法,熟练掌握Hadoop/Spark/HBase等的运行机制,有PB级数据处理经验。
7、良好的大数据视野和思维,高效的沟通能力,对技术由衷热爱,乐于分享。
8、有知名互联网背景或0-1构建过数据中台经验者优先。
9、对制造、冶金行业有整体的理解,对数据业务场景非常敏感,能够有效结合业务和技术创新,全局地规划或完善数据服务体系以解决业务/产品的问题。
|