1. 負責設(shè)計和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng)，進行多平臺信息的抓取和分析工作；
2.研究各種網(wǎng)站、鏈接的形態(tài)，發(fā)現(xiàn)它們的特點和規(guī)律；
3.解決技術(shù)疑難問題，包括反反爬、驗證碼、壓力控制等，提升抓取的效率和質(zhì)量。
4.負責爬蟲邏輯的開發(fā)，以及API接口的對接，快速響應業(yè)務(wù)變動。
1. 專科及以上學歷，計算機相關(guān)專業(yè)，3年以上數(shù)據(jù)采集經(jīng)驗，1年以上Python開發(fā)和管理經(jīng)驗；
2. 有扎實的算法和數(shù)據(jù)結(jié)構(gòu)能力，有扎實python語言基礎(chǔ)；
3. 熟悉爬蟲原理，常見的反爬蟲技術(shù)，有公眾號、小程序等爬蟲項目開發(fā)經(jīng)驗，能夠解決封賬號、封IP、驗證碼識別、圖像識別等問題；
4. 熟悉Linux操作，Re、Xpath等頁面解析工具，selenium、Appnium、Airtest等模擬工具，MySQL、Redis等常用數(shù)據(jù)庫；
5. 熟悉flask、Django后端技術(shù)，有APP逆向；
6.對技術(shù)熱衷，工作積極主動，溝通交流能力強，具有良好的團隊合作精神；
7.有淘系等其他電商平臺采集經(jīng)驗優(yōu)先；
8.有瀏覽器插件開發(fā)經(jīng)驗優(yōu)化；
9.熟悉CEF，Webkit內(nèi)核，有瀏覽器開發(fā)經(jīng)驗優(yōu)先。
廣州市海珠區(qū)琶洲大道68號
020-32643448
020-32643448
