崗位職責: 1.理解和溝通業務需求,編寫大數據分析方案;
2.大數據、數倉平臺架構設計及開發工作;
3.熟悉大數據平臺建設相關工作,整合公司生態合作伙伴資源進行大數據平臺的系統架構或組件的調研,開發和維護工作;
4.基于大數據的數據集成、數據開發工具的預研和開發;
5.數據管理、數據質量評估、數據運維類功能設計和開發。
崗位要求:
1.三年及以上大數據開發工作經驗;
2.具備扎實的數據結構及算法功底,較強的建模及編程能力,熟練掌握python、scala、mr、sql等編程;
3.熟悉Hadoop體系架構,包括Hive、Hbase、MapReduce等組件,能熟練使用MapReduce和SparkStreaming工具進行數據計算和處理;
4.熟悉kettle、DataX等數據的采集、清洗、預處理、存儲與計算流程;
5.熟悉基本Linux操作系統操作,熟悉shell等腳本編程
6.具備較強的溝通能力、團隊協作能力與有良好的學習和理解能力;
7.熟悉數據倉庫者,能獨立搭建大數據平臺者優先。
上班地址:-山東-濟南-國華廣場