職位描述
職位描述:
捕獲互聯(lián)網(wǎng)上的內(nèi)容,從紛繁復(fù)雜的數(shù)據(jù)中,自動(dòng)過濾出滿足條件的內(nèi)容,根據(jù)設(shè)定條件進(jìn)行分解并存入數(shù)據(jù)庫,以備后續(xù)分析。能夠及時(shí)的跟蹤更新,增量捕獲,避免重復(fù)內(nèi)容,提高爬蟲效率。
技能要求:
? 正規(guī)大學(xué)畢業(yè),計(jì)算機(jī)或者數(shù)學(xué)相關(guān)專業(yè),本科以上學(xué)歷
? 精通Python,相關(guān)崗位三年以上工作經(jīng)驗(yàn),HTTP協(xié)議
? 精通HTML,DOM結(jié)構(gòu),了解XPATH語法和應(yīng)用
? 精通爬蟲開源框架scrapy,熟練使用數(shù)據(jù)分析工具nummy,pandas
? 精通數(shù)據(jù)結(jié)構(gòu)和各種排序算法
? 熟悉Linux操作系統(tǒng),能夠熟練使用shell腳本
? 熟悉正則表達(dá)式,能夠熟練使用正則常用的匹配模式
? 有語義分析經(jīng)驗(yàn),有使用jieba進(jìn)行中文分詞處理經(jīng)驗(yàn)
? 有數(shù)學(xué)和統(tǒng)計(jì)學(xué)背景者優(yōu)先
企業(yè)介紹
軟通動(dòng)力——中國領(lǐng)先的技術(shù)服務(wù)提供商及全球客戶首選合作伙伴
軟通動(dòng)力是中國領(lǐng)先的技術(shù)服務(wù)提供商,立足中國,服務(wù)全球市場。軟通動(dòng)力具有端到端“軟件+服務(wù)”綜合服務(wù)能力,服務(wù)范圍包括:咨詢服務(wù)、解決方案及系統(tǒng)集成服務(wù)、IT外包及業(yè)務(wù)流程外包服務(wù)等。在高科技/通信、銀行/企業(yè)金融/保險(xiǎn)、電力/能源/水務(wù)/環(huán)保、交通/物流、汽車/制造、零售/電商等10多個(gè)重要行業(yè)及業(yè)務(wù)領(lǐng)域,軟通動(dòng)力具有強(qiáng)大的縱深服務(wù)優(yōu)勢。
過去,軟通動(dòng)力深刻理解客戶需求,是企業(yè)盈利和成長的最佳合作伙伴;今天,軟通動(dòng)力充分把握科技大勢,借助云計(jì)算、移動(dòng)互聯(lián)、大數(shù)據(jù)等新興技術(shù)手段,和合作伙伴一起推出創(chuàng)新型解決方案,致力于幫助我們的客戶成為智慧的政府和智慧的企業(yè);未來,軟通動(dòng)力將不懈努力,以創(chuàng)新思維和領(lǐng)先技術(shù),為客戶創(chuàng)造可持續(xù)的價(jià)值。
軟通動(dòng)力于2001年創(chuàng)立,全球總部設(shè)于北京,在全球設(shè)有30多個(gè)分支機(jī)構(gòu),28個(gè)交付中心。員工總數(shù)超過1萬8千人,服務(wù)數(shù)百家中國及海外客戶。