崗位職責:
1、負責數據倉庫或者數據湖ETL設計開發;
2、負責與業務部門數據需求的溝通與確認;
3、負責團隊項目工程管理定期發布與日常運維。
任職要求:
1、3-7年數據倉庫、數據平臺或者數據湖的ETL開發工作經驗,具有實際業務邏輯到ETL過程的設計經驗優先;
2、熟悉1-2個主流ETL開發工具,如:Talend、Kettle或者SSIS等;
3、熟練掌握2個以上主流數據庫的使用,如:SQL Server、Oracle 或 PostgreSQL。對SQL查詢優化有豐富的經驗;
4、熟練使用的項目和需求管理工具,包括 Git,TFS等;
5、清晰的邏輯思維能力、良好的溝通能力和獨立的ETL過程設計能力;
6、工作認真仔細,積極主動,具備較強的自主學習、自我總結能力;
7、熟悉 Hive 和 Spark 大數據計算框架及具有相關ETL和數據處理過程的開發經驗;
8、具有 AWS EMR 與 AWS Redshift 相關工作經驗和具有AWS從業者以上證書,優先考慮