崗位職責:
1.參與大數據平臺架構設計和開發,構建高效、可靠的數據處理管道。負責數據倉庫、數據湖等數據平臺的搭建、維護和優化。設計和開發ETL/ELT流程,進行數據清洗、轉換和加載。
編寫高效、可維護的SQL代碼,進行數據查詢和分析。
2.與數據架構師和業務團隊合作,理解數據需求并提供數據解決方案。監控數據平臺性能,識別和解決性能瓶頸。
3.研究和探索新的數據技術和工具,不斷提升數據平臺能力。
任職要求:
1.具備本科及以上學歷,計算機科學、軟件工程或相關專業,5年以上數據開發經驗。
2.精通SQL語言,熟悉至少一種主流數據庫(如MySQL、Oracle、PostgreSQL等),熟悉Hadoop生態系統(如HDFS、Hive、Spark等),并具備實際項目經驗。熟悉數據倉庫建模理論,具備數據倉庫設計和開發經驗,熟悉ETL/ELT工具(如Informatica、DataStage、Kettle等),并具備實際項目經驗。
3.具備良好的編程能力,熟悉至少一種編程語言(如Python、Java、Scala等),具備良好的溝通能力和團隊合作精神,能夠獨立解決問題。