026170-數(shù)據(jù)工程師（比價(jià)搜索）
12000-24000元
應(yīng)屆畢業(yè)生
本科
應(yīng)屆畢業(yè)生
本科
- 全勤獎(jiǎng)
- 節(jié)日福利
- 不加班
- 周末雙休
最近更新
2083人關(guān)注
職位描述
該職位還未進(jìn)行加V認(rèn)證，請(qǐng)仔細(xì)了解后再進(jìn)行投遞！
工作職責(zé)：
1、負(fù)責(zé)數(shù)據(jù)爬蟲系統(tǒng)的設(shè)計(jì)和開(kāi)發(fā)工作，能應(yīng)對(duì)各種網(wǎng)站的反爬機(jī)制，順利爬取數(shù)據(jù)；
2、負(fù)責(zé)數(shù)據(jù)爬取、解析、清洗、入庫(kù)等工作；
3、幫助團(tuán)隊(duì)解決各種爬蟲技術(shù)問(wèn)題，提升海量數(shù)據(jù)系統(tǒng)的抓取效果與性能。
任職資格：
1、本科及以上學(xué)歷，熟練使用python，并掌握常用的信息抽取工具，如正則表達(dá)式、Xpath等；
2、熟悉JavaScript、html、css、并能夠通過(guò)調(diào)試網(wǎng)頁(yè)代碼搜索請(qǐng)求地址并進(jìn)行模擬；
3、熟悉常用反爬機(jī)制并能夠進(jìn)行破解；
4、熟悉常用的IP代理訪問(wèn)方式；
5、熟悉多線程、網(wǎng)絡(luò)編程以及分布式爬蟲架構(gòu)開(kāi)發(fā)場(chǎng)景；
6、了解大數(shù)據(jù)技術(shù)如hadoop、spark等。
注：聯(lián)系我時(shí)，請(qǐng)說(shuō)是在大渡口人才網(wǎng)上看到的。
工作地點(diǎn)
地址：深圳福田區(qū)深圳平安金融中心
求職提示：用人單位發(fā)布虛假招聘信息，或以任何名義向求職者收取財(cái)物（如體檢費(fèi)、置裝費(fèi)、押金、服裝費(fèi)、培訓(xùn)費(fèi)、身份證、畢業(yè)證等），均涉嫌違法，請(qǐng)求職者務(wù)必提高警惕。
職位發(fā)布者
HR
中國(guó)平安人壽保險(xiǎn)股份有限公司
-
保險(xiǎn)
-
500-999人
-
股份制企業(yè)
-
紅專路政六街豫新大樓
相似職位
-
物業(yè)投資拓展經(jīng)理 10000-15000元大渡口區(qū) 3年以上 本科成都市佳兆業(yè)物業(yè)管理有限公司
-
經(jīng)營(yíng)預(yù)算員 面議大渡口區(qū) 應(yīng)屆畢業(yè)生 不限中冶建工集團(tuán)有限公司
-
供應(yīng)鏈-工藝技術(shù)見(jiàn)習(xí)工程師-重慶 5000-7000元大渡口區(qū) 應(yīng)屆畢業(yè)生 不限杭州?？低晹?shù)字技術(shù)股份有限公司
-
夜班領(lǐng)班/組長(zhǎng) 面議大渡口區(qū) 應(yīng)屆畢業(yè)生 不限沃爾瑪(中國(guó))投資有限公司
-
物業(yè)工程領(lǐng)班（南京秦淮） 面議大渡口區(qū) 應(yīng)屆畢業(yè)生 不限深圳天安智慧園區(qū)運(yùn)營(yíng)有限公司
-
小時(shí)工240/天超輕松 面議大渡口區(qū) 應(yīng)屆畢業(yè)生 不限重慶夢(mèng)然人力資源管理有限公司
