崗位職責:
1.數(shù)據(jù)采集實施:負責多種數(shù)據(jù)源的數(shù)據(jù)采集,包括結構化、半結構化和非結構化數(shù)據(jù);執(zhí)行數(shù)據(jù)采集計劃;對采集到的數(shù)據(jù)進行清洗和預處理。
2.數(shù)據(jù)運維管理:負責數(shù)據(jù)的備份、恢復、歸檔等管理工作,制定數(shù)據(jù)存儲的規(guī)范和標準。
3.數(shù)據(jù)架構設計與實施:建立數(shù)據(jù)倉庫指標體系和分層架構,開發(fā)數(shù)據(jù)處理腳本和程序,實現(xiàn)數(shù)據(jù)的批量處理和實時處理。
4.數(shù)據(jù)建模設計:負責設計和維護工業(yè)互聯(lián)網(wǎng)相關的數(shù)據(jù)模型,包括概念模型、邏輯模型和物理模型。
5.數(shù)據(jù)服務實施:負責與其他系統(tǒng)進行數(shù)據(jù)集成,開發(fā)數(shù)據(jù)接口,實現(xiàn)數(shù)據(jù)的共享和交換。
任職要求:
1.學歷及專業(yè)要求:本科及以上學歷,原則上“雙一流”高校計算機、軟件工程、數(shù)據(jù)科學與大數(shù)據(jù)技術、物聯(lián)網(wǎng)工程、自動化等相關專業(yè)。
2.崗位經(jīng)驗:3年以上相關工作經(jīng)驗。
3.專業(yè)技能:熟練掌握 ETL 工具或編程語言(Python/Java/Scala),具備數(shù)據(jù)抽取、轉換、加載的實戰(zhàn)經(jīng)驗;熟悉關系型數(shù)據(jù)庫(MySQL/Oracle)、NoSQL(HBase/MongoDB)、數(shù)據(jù)倉庫(Hive/Redshift)、分布式存儲架構(HDFS/Ceph)等存儲技術,了解數(shù)據(jù)庫設計、管理與優(yōu)化、數(shù)據(jù)庫備份與恢復;熟悉SQL、HQL等數(shù)據(jù)庫編程語言、數(shù)據(jù)倉庫管理工具,具備熟練分析SQL語句性能,精通DB索引、分表等優(yōu)化措施設計和實施的能力;掌握接口開發(fā)框架(如 Spring Boot、Django),能編寫高效、穩(wěn)定的數(shù)據(jù)接口。
4.溝通協(xié)作及能力要求:能夠與開發(fā)團隊、產(chǎn)品經(jīng)理等有效溝通,準確理解需求并反饋問題;具備良好的團隊協(xié)作精神,能夠與團隊成員緊密合作,共同解決問題;具備較強的邏輯思維和問題解決能力,能夠快速定位和復現(xiàn)問題。