精品一久久_日韩成人激情_av2016天堂网_国产成年片_日日影视_精品国产观看

崗位職責： 日常數據表的開發，數據庫的維護以及數據提取 崗位要求： 1、精通web，app抓取原理及技術，熟悉常用的爬蟲網絡框架及重要組件。 2、熟悉linux開發環境和數據庫，具備5年及以上java、python開發經驗，有安卓、ios開發經驗者優先。 3、具備js逆向、驗證碼破解、app反編譯能力，精通爬蟲相關技術，如：httpClient/jSoup/xpath/CSS/正則表達式/驗證碼加密處理/代理池等網頁信息抽取技術，熟悉掌握熟悉xposed、appnium等工具。 4、熟悉http(s)、TCP等網絡協議，熟練掌握Fiddler、charles、Http debugger等抓捕工具。 5、有金融行業大規模數據抓取經驗者優先，有通用爬蟲設計經驗者優先。 6、熟悉分布式爬蟲系統的開發與維護；熟悉數據的抽取、清洗、轉換和存儲；熟悉爬蟲策略和防屏蔽規則，爬蟲系統的優化，監控和報警，提升網頁抓取的效率和質量。 7、有良好的團隊協作能力、學習和理解能力，能較快了解和掌握新知識；具備優秀的邏輯思維，具備良好的溝通和推動能力，主動性強。