崗位職責:
1.負責企業數據中臺的數據倉庫的實施開發ETL過程與基于Flink計算加工的設計與開發;
2.負責企業數據中臺建設,設計數據邏輯和物理模型并完成相關開發工作;
3.負責數據模型的運營優化,及時響應業務系統的變更,保證模型的數據質量和穩定性;
4.根據數據應用開發和數據分析需求推進業務信息中心建設,提高數據使用效率;
5.負責公司數據標簽體系建設,并推動標簽體系在實際業務場景中落地;
6.負責各業務系統數據源數據探查調研,準確性完整性驗證;
7.數據同步及計算任務的日常管理,跑批,維護,監控;
8.數據管道的建設與迭代, 離線數據與實時數據的平滑過渡;
9.參與大數據項目的可行性分析、立項及選型工作;
10.了解大數據、數據倉庫、開源/商用分布式數據庫技術,掌握主流技術并應用到實際工作。
任職要求:
1.大學本科及以上、計算機相關專業;
2.5年及以上專業工作經驗;
3.熟悉Hadoop平臺,熟悉MapReduce工作原理;
4.對Flink、Spark Streaming等流式計算框架有深入理解,在Flink方面有實際開發經驗優先;
5.熟練使用Orcale、MySQL、Hive、HBase等數據庫存儲,有較強的SQL編寫與優化能力;
6.熟悉數據倉庫的建模理論,有DW/BI數據架構設計模型設計和性能調優能力;
7.熟悉大數據生態圈相關組件,如Kafka、Zookeeper、HBase、Hive、Flume、Elasticsearch等的工作原理與實際的開發使用經驗;
8.熟悉常用算法和數據結構,熟悉網絡編程、多線程編程技術;
9.具有較強的學習能力和業務理解能力;具備責任心、正直誠信,具備優良的職業操守和崗位敏感度;具備較強的溝通能力、自我驅動能力和抗壓能力;嚴謹細致,具備較強的團隊協作能力。
上班地址:-上海-康橋東路2弄