崗位職責(zé):1.?負責(zé)數(shù)據(jù)采集程序的編寫、調(diào)試、運行;?2.?負責(zé)分布式程序的部署、優(yōu)化、維護;?3.?負責(zé)所需數(shù)據(jù)的整理、清洗、入庫;?4.?針對不同網(wǎng)站的反爬蟲技術(shù)提出有效的應(yīng)對策略;?任職要求:1.本科以上學(xué)歷,一年以上工作經(jīng)驗,能力突出者可適當(dāng)放寬;2.熟練python,熟練使用多線程/多協(xié)程,熟練使用headless瀏覽器開發(fā);3.熟悉php,ruby,node等腳本編程語言,熟練使用各種數(shù)據(jù)庫操作;?4.熟悉基礎(chǔ)前端知識,熟練使用xpath對html進行結(jié)構(gòu)化提取,不限于使用lxml,beautifulsoup;5.性格隨和,善于表達溝通,團隊協(xié)作;?6.抗壓能力強,能保質(zhì)保量的高效完成指定工作;7.較強的自主學(xué)習(xí)能力,能閱讀相關(guān)英文文檔;8.有后臺接口開發(fā)、前端頁面開發(fā)相關(guān)經(jīng)驗者有加分,github有個人項目者有加分;