崗位職責:
1.設計和實現高效的大數據處理方案,包括ETL。
2.使用Java和相關大數據技術開發可擴展的數據處理應用。
3.優化數據處理流程,提高系統性能和數據質量。
4.解決大數據相關技術難題,持續改進系統架構。
5.開展技術選型驗證、核心技術問題攻關。
任職要求:
1.具備扎實的專業基礎,如計算機體系結構、操作系統、計算機網絡等。
2熟悉大數據生態相關技術,如Hdfs\HBase\Hive\Spark\Kafka\Flink\ES等 。
3.具備扎實的Java開發基礎,熟悉Java生態常 用框架與技術。
4.熟悉SQL與NoSQL數據庫技術。
5.具備良好的問題解決能力和創新思維。
6.良好的團隊合作和溝通能力。
1.有萬億級、PB級數據處理實戰經驗;
2.有安全行業從業或研究經歷;
3.熟悉Elastic Stack系列工具;
4.對機器學習深度學習神經網絡AI等技術有研究或者有從業經驗: