崗位職責(zé):
1、參與公司數(shù)據(jù)采集與分析項(xiàng)目工作;
2、參與數(shù)據(jù)采集與分析代碼編寫、單元測試和bug修復(fù)工作;
3、根據(jù)產(chǎn)品和項(xiàng)目情況,優(yōu)化及維護(hù)代碼;
4、根據(jù)產(chǎn)品開發(fā)規(guī)范,完成相關(guān)技術(shù)文檔編寫。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè);
2、2-5年的爬蟲項(xiàng)目經(jīng)驗(yàn);
3、參與爬蟲項(xiàng)目的構(gòu)架設(shè)計(jì)、研發(fā)、編程工作、改進(jìn)和提升爬蟲效率;
4、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則、提升網(wǎng)頁抓取和效率和質(zhì)量;
5、負(fù)責(zé)后臺(tái)爬蟲數(shù)據(jù)的分布式儲(chǔ)存設(shè)計(jì)及代碼實(shí)現(xiàn);
6、負(fù)責(zé)網(wǎng)頁采集任務(wù)的分析及采集方案設(shè)計(jì);
7、負(fù)責(zé)分布式爬蟲策略持續(xù)優(yōu)化。
1、參與公司數(shù)據(jù)采集與分析項(xiàng)目工作;
2、參與數(shù)據(jù)采集與分析代碼編寫、單元測試和bug修復(fù)工作;
3、根據(jù)產(chǎn)品和項(xiàng)目情況,優(yōu)化及維護(hù)代碼;
4、根據(jù)產(chǎn)品開發(fā)規(guī)范,完成相關(guān)技術(shù)文檔編寫。
任職要求:
1、大學(xué)本科及以上學(xué)歷,計(jì)算機(jī)或相關(guān)專業(yè);
2、2-5年的爬蟲項(xiàng)目經(jīng)驗(yàn);
3、參與爬蟲項(xiàng)目的構(gòu)架設(shè)計(jì)、研發(fā)、編程工作、改進(jìn)和提升爬蟲效率;
4、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則、提升網(wǎng)頁抓取和效率和質(zhì)量;
5、負(fù)責(zé)后臺(tái)爬蟲數(shù)據(jù)的分布式儲(chǔ)存設(shè)計(jì)及代碼實(shí)現(xiàn);
6、負(fù)責(zé)網(wǎng)頁采集任務(wù)的分析及采集方案設(shè)計(jì);
7、負(fù)責(zé)分布式爬蟲策略持續(xù)優(yōu)化。
職位類別: Python開發(fā)工程師
舉報(bào)
爬蟲開發(fā)工程師職業(yè)大全:
溫馨提示
![app下載 app下載](http://img3.job1001.com/job1001/5.0/images/slide-adver.png)
- 公司規(guī)模:50 - 99人
- 公司性質(zhì):民營企業(yè)
- 所屬行業(yè):房地產(chǎn)、建筑、路橋、監(jiān)理、造價(jià)、裝飾、安裝、鋼結(jié)構(gòu)、建筑消防、通信、物業(yè)等
- 所在地區(qū):廣東-深圳市
- 聯(lián)系人:趙小姐
- 手機(jī):會(huì)員登錄后才可查看
- 郵箱:會(huì)員登錄后才可查看
- 郵政編碼:
工作地址
- 地址:廣東省深圳市龍華區(qū)龍華街道清華社區(qū)港之龍商務(wù)中心C座1008