崗位職責(zé)：
?1.?研究各種網(wǎng)站、網(wǎng)頁(yè)、鏈接的形態(tài)，發(fā)現(xiàn)它們的特點(diǎn)和規(guī)律；
?2.?使用Python等語(yǔ)言開發(fā)采集程序，或者熟練使用互聯(lián)網(wǎng)數(shù)據(jù)采集工具；
?3.?設(shè)計(jì)研究各種策略和算法，持續(xù)提升采集效果；
?4.?處理各類網(wǎng)絡(luò)通信環(huán)境下的網(wǎng)絡(luò)限制，解決網(wǎng)頁(yè)訪問(wèn)中的圖像驗(yàn)證及拖拉驗(yàn)證；
?5.?編寫維護(hù)相關(guān)采集技術(shù)文檔；
崗位要求：
1.?癡迷互聯(lián)網(wǎng)，對(duì)探索未知領(lǐng)域、發(fā)掘有價(jià)值數(shù)據(jù)有濃厚的興趣；
2.?大專及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)；
3.?1年以上web開發(fā)或者相關(guān)工作經(jīng)驗(yàn)，1年以上數(shù)據(jù)采集工作經(jīng)驗(yàn)者優(yōu)先考慮；
4.?熟悉網(wǎng)絡(luò)爬蟲開發(fā)語(yǔ)言或者熟練使用互聯(lián)網(wǎng)數(shù)據(jù)采集工具；
5.?精通java/python其中至少一門語(yǔ)言，熟悉各類加密、解密算法和機(jī)制；
6.?很強(qiáng)的自我驅(qū)動(dòng)力、結(jié)果導(dǎo)向并極具責(zé)任感；