崗位職責:
1、分析客戶業(yè)務場景,設計定制化數據治理框架,制定數據標準、主數據管理策略及數據質量規(guī)則。
2、主導公司數據治理平臺產品的部署、配置和集成,打通客戶業(yè)務系統數據孤島。
3、完成平臺安裝、測試及上線,展示數據治理成果(如數據資產目錄、血緣分析報告)。
4、優(yōu)化平臺性能,提升數據處理效率,支持客戶實時數據分析需求。
5、設計數據從采集到銷毀的全周期策略,建立客戶數據資產目錄并跟蹤血緣關系。
6、實施數據清洗、標準化及脫敏操作,修復歷史數據質量問題(如重復記錄、字段缺失)。
7、協調客戶IT、業(yè)務部門推進治理落地,向非技術人員傳遞治理價值(如降本增效、合規(guī)風控)。
8、組織數據治理培訓,提升客戶數據意識及平臺操作能力。
9、確保客戶數據符合GDPR等法規(guī),設計數據安全策略(訪問控制、加密)并執(zhí)行審計。
任職要求:
1、熟練使用數據治理平臺完成數據采集、數據治理、數據開發(fā)、數據共享交換、數據安全等工作;
2、熟悉數據倉庫設計理論,掌握ODS、STD、DWD、DM分層設計方法,獨立建設主題庫、專題庫;
3、掌握數據標準、數據質量、元數據、數據模型、數據血緣等數據治理相關實戰(zhàn)知識;
4、了解數據治理需求分析、數據建模、數據開發(fā);
5、了解多項大數據處理/分析相關的工具/框架,如Hadoop、Hive、Spark、kafka、HBase、Presto等;
6、熟練ETL數據清洗流程,熟悉ETL開發(fā)工具與平臺,能基于數據治理平臺開展數據ETL工作;
7、熟練使用Spark、Flink計算引擎開發(fā)離線作業(yè)和實時作業(yè);
8、熟練使用平臺開發(fā)API接口服務;
9、掌握數據安全分級分類、數據加密、數據脫敏、敏感數據識別等技能;
10、掌握數據可視化工具的使用,基于平臺配置數據源、數據集、儀表盤和數據大屏;