職位描述
SqlDjangoTornadoMySQLOracle電子商務網絡/信息安全
"崗位概述
1、負責設計和開發分布式網絡爬蟲系統
2、研究爬蟲策略和防屏蔽規則，解決封賬號、封IP、驗證碼等難點攻克，提升數據抓取的效率和質量
3、負責爬蟲核心算法和策略優化，提升爬蟲系統的穩定性、可擴展性
4、實時監控爬蟲任務的執行狀況，及時處理爬蟲異常
要求項
教育背景要求(專科及以上)
工作經驗(3 年以上)
知識與技能(1. 有實際分布式爬蟲系統開發經驗，熟悉scrapy和scrapy-redis框架及其參數調優
2. 熟悉使用request,urllib模塊進行源碼下載；Xpath,BeautifulSoup,Re數據提取
3. 能夠處理圖片驗證碼、滑塊驗證碼、二維碼登錄，短信驗證碼；JS反爬，APP抓取數據，多緯度獲取數據
4. 熟悉使用selenium，appium，uiautomator2，參與手機群控系統的規劃，設計與開發
5. 熟悉網絡抓包工具charles，fiddler，mitmproxy抓包分析，請求包的偽造
6. 使用flask編寫數據接口，查詢elasticsearch，mysql，mogondb數據返回前端
7. 具有hadoop，hdfs，spark，kafka，elasticsearch等大數據使用經驗)
其他(具有淘寶、抖音、小紅書開發經驗優先)"
工作地點
佛山禪城區萬科金融中心1
相似職位
- Python開發工程師（佛山）1.1-1.5萬
佛山 - 南海
佛山市銀泰運營管理有限公司 - Python全棧工程師（佛山）1-1.5萬
佛山 - 南海
佛山市銀泰運營管理有限公司 - python1.5-2.5萬
佛山 - 禪城
深圳建廣數字科技有限公司青島分公司 佛山 - 順德
廣東美的制冷設備有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節跳動招聘
- 新華網招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業銀行招聘
- 交通銀行招聘
- 建發集團招聘
- 中國移動招聘
- 中國聯通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發布者
牟芷琪/人事經理
昨日活躍立即溝通
深圳建廣數字科技有限公司青島分公司
深圳建廣數字科技有限公司是中國領先的傳統產業數字化轉型完整IT解決方案和端到端IT服務的提供商。公司在北京、上海、廣州、深圳、武漢、青島、大連、無錫等地均設有分支機構。二十余年來一直在數字化轉型領域持續積累，致力于為客戶提供具有行業特色、覆蓋企業數字化轉型所需的整體解決方案以及相關的端到端服務。800多位專家顧問，1700多位專業服務人員，以專業精神、豐富的經驗和出色的服務享譽業界。迄今已服務超過800多家包括財富500強在內的國內外眾多客戶，獲得廣泛贊譽。公司一直致力于助力傳統產業數字化轉型（Digital transformation），在建立數字化轉換（Digitization）、數字化升級（Digitalization）基礎上，進一步賦能公司核心業務，以新建一種商業模式為目標的高層次轉型。圍繞這一理念，公司已建立起套裝軟件及服務、數字化解決方案及服務、IT開發與外包服務三大縱深賦能體系。并滿足客戶從咨詢、技術實施到運維完整的端到端需求。
公司主頁