崗位職責(zé):1、設(shè)計(jì)和開(kāi)發(fā)網(wǎng)絡(luò)爬蟲(chóng)算法,從多平臺(tái)采集數(shù)據(jù)并整理入庫(kù);2、維護(hù)爬蟲(chóng)程序與數(shù)據(jù)接口,規(guī)避反爬措施,提升數(shù)據(jù)抓取的效率和質(zhì)量;3、獨(dú)立解決爬蟲(chóng)開(kāi)發(fā)和維護(hù)過(guò)程中的各類(lèi)問(wèn)題;4、配合團(tuán)隊(duì)完成其他相關(guān)工作任務(wù)。?任職要求:1、全日制統(tǒng)招本科以上學(xué)歷,1年以上的爬蟲(chóng)程序設(shè)計(jì)與開(kāi)發(fā)經(jīng)驗(yàn);2、具有良好的Python基礎(chǔ)和編碼風(fēng)格,熟悉正則表達(dá)式、有Python多線程、多進(jìn)程編程經(jīng)驗(yàn);3、能夠使用Scrapy、PySpider、?urllib、BS、Request等開(kāi)發(fā)爬蟲(chóng)算法,處理登錄、驗(yàn)證、cookie等;4、熟悉常用的數(shù)據(jù)庫(kù)SQL、MYSQL,了解MOngodb優(yōu)先;5、具有較強(qiáng)的學(xué)習(xí)能力、良好的溝通、團(tuán)隊(duì)協(xié)作和計(jì)劃能力,能夠獨(dú)立解決技術(shù)問(wèn)題;????????????????????????????????????????????????6、有過(guò)APP爬取經(jīng)驗(yàn)的優(yōu)先。