崗位職責(zé):
1、數(shù)據(jù)架構(gòu)設(shè)計(jì):設(shè)計(jì)并優(yōu)化數(shù)據(jù)架構(gòu),確保數(shù)據(jù)的高效性、可擴(kuò)展性和安全性。參與數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖等數(shù)據(jù)存儲(chǔ)解決方案的規(guī)劃和實(shí)施。
2、使用SQL、Python、Java等編程語(yǔ)言進(jìn)行數(shù)據(jù)處理、清洗和轉(zhuǎn)換;運(yùn)用Hadoop、Spark、Hive等大數(shù)據(jù)處理框架進(jìn)行大規(guī)模數(shù)據(jù)處理和分析;開(kāi)發(fā)數(shù)據(jù)ETL(Extract, Transform, Load)流程,實(shí)現(xiàn)數(shù)據(jù)的高效遷移和整合。
3、根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)建模,設(shè)計(jì)適合的數(shù)據(jù)模型和結(jié)構(gòu);優(yōu)化數(shù)據(jù)查詢(xún)性能,提升數(shù)據(jù)處理的效率和準(zhǔn)確性。
4、與產(chǎn)品、運(yùn)營(yíng)、開(kāi)發(fā)等部門(mén)緊密合作,提供數(shù)據(jù)支持、數(shù)據(jù)分析報(bào)表和數(shù)據(jù)優(yōu)化解決方案。參與制定數(shù)據(jù)相關(guān)的技術(shù)標(biāo)準(zhǔn)、流程和規(guī)范,推動(dòng)數(shù)據(jù)治理體系的建立。
5、參與數(shù)據(jù)平臺(tái)、數(shù)據(jù)服務(wù)等的開(kāi)發(fā)和維護(hù)工作。監(jiān)控系統(tǒng)運(yùn)行狀態(tài),及時(shí)發(fā)現(xiàn)并解決潛在的技術(shù)問(wèn)題。
6、關(guān)注數(shù)據(jù)領(lǐng)域的新技術(shù)、新工具和新方法,持續(xù)學(xué)習(xí)和研究;參與數(shù)據(jù)相關(guān)的創(chuàng)新項(xiàng)目,推動(dòng)技術(shù)成果的應(yīng)用和落地。
任職要求:
1、本科及以上學(xué)歷,計(jì)算機(jī)科學(xué)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)或相關(guān)專(zhuān)業(yè),如有物流領(lǐng)域從業(yè)工作經(jīng)歷優(yōu)先考慮。
2、技能要求:熟練掌握SQL語(yǔ)言,能夠進(jìn)行高效的數(shù)據(jù)庫(kù)查詢(xún)和操作;熟悉Python、Java等至少一種編程語(yǔ)言,具備良好的編程能力;了解Hadoop、Spark、Hive等大數(shù)據(jù)處理框架及其使用方法;熟悉數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖等數(shù)據(jù)存儲(chǔ)解決方案的設(shè)計(jì)和實(shí)現(xiàn)。
3、擁有5年以上數(shù)據(jù)工程師或相關(guān)領(lǐng)域的工作經(jīng)驗(yàn);有大型互聯(lián)網(wǎng)企業(yè)、汽車(chē)主機(jī)廠等行業(yè)背景者優(yōu)先考慮。
4、具備良好的邏輯思維能力、學(xué)習(xí)能力和團(tuán)隊(duì)合作精神;能夠承受工作壓力,具備較強(qiáng)的責(zé)任心和抗壓能力;對(duì)數(shù)據(jù)敏感,具有數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)的意識(shí)和能力。