職位描述

崗位職責(zé)：

1、負(fù)責(zé)爬蟲(chóng)策略和防屏蔽規(guī)則設(shè)計(jì)，后臺(tái)爬蟲(chóng)數(shù)據(jù)存儲(chǔ)設(shè)計(jì)以及代碼實(shí)現(xiàn)；

2、負(fù)責(zé)網(wǎng)頁(yè)采集任務(wù)的分析及采集方案設(shè)計(jì)及實(shí)現(xiàn)；

任職要求：

1、2年以上開(kāi)發(fā)工作經(jīng)驗(yàn)，Python基礎(chǔ)扎實(shí)；

2、熟悉多線(xiàn)程、多進(jìn)程、協(xié)程開(kāi)發(fā)、網(wǎng)絡(luò)編程，精通網(wǎng)頁(yè)抓取原理及技術(shù)的實(shí)現(xiàn)細(xì)節(jié)；

3、掌握HTML、CSS、JQuery、RESTful 相關(guān)技術(shù)；

4、具有良好的站點(diǎn)分析經(jīng)驗(yàn)，能獨(dú)立處理基于(seeion, cookie)、(AccessToken, Token)、(selenium, splash)、( 訪(fǎng)問(wèn)量, 訪(fǎng)問(wèn)頻率)的反爬。自主設(shè)計(jì)爬取流程；

5、熟悉基于規(guī)則的網(wǎng)頁(yè)信息定位，精通正則表達(dá)式，xpath語(yǔ)法；

6、精通原生Python urllib爬取方式、精通原生Python requests爬取方式、精通框架Python scrapy的爬取方式、熟 悉Python aiohttp 異步請(qǐng)求框架的爬取方式；

7、熟悉掌握一種或多種熱門(mén)關(guān)系型數(shù)據(jù)庫(kù)和非關(guān)系型數(shù)據(jù)庫(kù)、熟練使用版本管理工具；

8、熱愛(ài)互聯(lián)網(wǎng)，對(duì)搜索技術(shù)和探索未知領(lǐng)域有濃厚興趣；

9、能夠高效地溝通,并與團(tuán)隊(duì)或跨團(tuán)隊(duì)同事有效地協(xié)作辦公。 

公司簡(jiǎn)介

柳州智視科技有限公司成立于2014年，位于廣西柳州國(guó)家高新區(qū)信息產(chǎn)業(yè)園，是一家專(zhuān)注于研發(fā)類(lèi)腦人工智能技術(shù)和應(yīng)用的企業(yè)。我們的目標(biāo)是實(shí)現(xiàn)具有自我學(xué)習(xí)和創(chuàng)造能力的類(lèi)腦人工智能。它將百倍提升研發(fā)能力和效率，幫助創(chuàng)造大量的新科技、新產(chǎn)業(yè)，帶動(dòng)百萬(wàn)億美元的新市場(chǎng)和新經(jīng)濟(jì)。公司目前實(shí)現(xiàn)了具有自我學(xué)習(xí)能力、能夠在復(fù)雜環(huán)境下、在運(yùn)動(dòng)過(guò)程中實(shí)時(shí)識(shí)別多種物體的人工智能。目前已經(jīng)達(dá)到世界領(lǐng)先水平。公司多次代表廣西高科技企業(yè)到國(guó)家級(jí)展會(huì)參展，得到了廣西科技廳和柳州市領(lǐng)導(dǎo)的認(rèn)同。公司以發(fā)展成具有全球影響力的、市值超過(guò)萬(wàn)億人民幣的高科技企業(yè)為目標(biāo)。愿意為員工提供良好的工作環(huán)境和福利，巨大的個(gè)人成長(zhǎng)空間，以及分享公司高速成長(zhǎng)的成果。