招聘崗位:項(xiàng)目助理 |
招聘人數(shù):1名 |
聘用方式 |
項(xiàng)目聘用A |
招聘條件 |
大學(xué)本科(簡稱“大學(xué)”)及以上學(xué)歷,學(xué)士及以上學(xué)位 一年以上工作經(jīng)驗(yàn);精通python開發(fā),熟悉使用scrapy、selenuim等常用開源爬蟲框架;熟悉HTTP協(xié)議、HTML、DOM,并有一定的JavaScript能力;熟練使用Xpath、正則表達(dá)式或BeautifulSoup任一種解析框架;有豐富的應(yīng)對反爬蟲的經(jīng)驗(yàn),例如合理使用IP池、驗(yàn)證碼識別技術(shù)等;熟練使用splash、瀏覽器內(nèi)核等工具解析動態(tài)頁面;熟悉多線程、網(wǎng)絡(luò)編程以及分布式爬蟲架構(gòu)開發(fā)場景熟悉使用Redis和任意一種常見的分布式消息隊(duì)列;熟練使用模擬登陸、UA池、動態(tài)代理、IP池等常規(guī)偽裝手段;熟悉常規(guī)反爬蟲手段以及常見的解決方案,有一定的逆向工程能力;熟練使用Mysql,熟悉Nosql數(shù)據(jù)庫等,有大數(shù)據(jù)開發(fā)相關(guān)經(jīng)驗(yàn)更佳;熟悉Ubuntu等Linux系統(tǒng),熟練使用shell工具; |
崗位職責(zé) |
管理建設(shè)數(shù)據(jù)獲取、爬蟲平臺框架,負(fù)責(zé)爬蟲系統(tǒng)規(guī)劃以及相應(yīng)架構(gòu)設(shè)計(jì);負(fù)責(zé)設(shè)計(jì)和開發(fā)網(wǎng)絡(luò)爬蟲應(yīng)用,包括調(diào)度、抓取、入庫等內(nèi)容;負(fù)責(zé)現(xiàn)有爬蟲核心算法和策略優(yōu)化;網(wǎng)絡(luò)爬蟲架構(gòu)設(shè)計(jì)、功能開發(fā)及優(yōu)化;參與建設(shè)平臺治理統(tǒng)一的數(shù)據(jù)體系,能獨(dú)立完成項(xiàng)目的系統(tǒng)分析,根據(jù)開發(fā)規(guī)范和數(shù)據(jù)模型設(shè)計(jì)實(shí)現(xiàn)數(shù)據(jù)開發(fā)任務(wù),保證數(shù)據(jù)質(zhì)量;參與數(shù)據(jù)倉庫的設(shè)計(jì)和研發(fā),進(jìn)行海量數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)ETL開發(fā);參與數(shù)據(jù)產(chǎn)品及應(yīng)用的數(shù)據(jù)研發(fā),發(fā)覺數(shù)據(jù)業(yè)務(wù)價(jià)值,助力數(shù)據(jù)化運(yùn)營業(yè)務(wù)。 |
崗位待遇 |
面議 |
其他 |
應(yīng)聘人請?jiān)?月27日之前完成系統(tǒng)中應(yīng)聘(請確保接收郵箱填寫正確),同時(shí)將個(gè)人簡歷發(fā)至以下聯(lián)系人郵箱(姓名+廣告名稱 )。 |
聯(lián)系方式 |
聯(lián)系人:賈雨葶 TEL:;E-mail:acemap@cs.sjtu.edu.cn 聯(lián)系地址:上海市閔行區(qū)東川路800號上海交通大學(xué)電信群樓1-432 |
https://join.sjtu.edu.cn/Admin/QsPreview.aspx?qsid=cc5c6f1aa6e549f287d4f2313d5b6658
為防止簡歷投遞丟失請抄送一份至:boshijob@126.com(郵件標(biāo)題格式:應(yīng)聘職位名稱+姓名+學(xué)歷+專業(yè)+中國博士人才網(wǎng))
中國-博士人才網(wǎng)發(fā)布
聲明提示:凡本網(wǎng)注明“來源:XXX”的文/圖等稿件,本網(wǎng)轉(zhuǎn)載出于傳遞更多信息及方便產(chǎn)業(yè)探討之目的,并不意味著本站贊同其觀點(diǎn)或證實(shí)其內(nèi)容的真實(shí)性,文章內(nèi)容僅供參考。