職位描述
崗位職責(zé):
1.負(fù)責(zé)設(shè)計和開發(fā)分布式爬蟲系統(tǒng),數(shù)據(jù)采集等進行多平臺多終端信息的抓取和分析;
2.建立完整的數(shù)據(jù)獲取、解析、入庫和監(jiān)控流程,優(yōu)化系統(tǒng)瓶頸,不斷迭代完善;
3.有驗證碼破解、反扒、分布式爬蟲架構(gòu)經(jīng)驗;
4.研究優(yōu)化算法,提升爬蟲系統(tǒng)的穩(wěn)定性和可擴展性;
5.快速支撐產(chǎn)品所需數(shù)據(jù)落地;
6.能獨立解決實際開發(fā)過程中碰到的問題,包括攻克反爬機制等
任職要求:
1.4年以上工作經(jīng)驗,計算機、電子、數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè)及??埔陨蠈W(xué)歷;
2.基礎(chǔ)扎實,熟練使用python,熟悉linux對應(yīng)的開發(fā)環(huán)境
3.熟悉反扒機制;
4.精通爬蟲原理、熟悉scrapy、pyspider等框架;
5.熟悉mysql等數(shù)據(jù)庫
6.優(yōu)秀的分析、解決問題能力,對未知的、挑戰(zhàn)性問題充滿激情;
7.人品正直,有原則,有一顆奮斗拼搏的心。
上班地點
工作地址:
南寧青秀區(qū)萬達(dá)廣場(青秀店)甲2棟,2609 查看上班路線
-
可能感興趣的職位
-
暫無推薦崗位
南寧相關(guān)熱門崗位
開發(fā)c開發(fā)工程師軟件開發(fā)軟件研發(fā)軟件實習(xí)生開發(fā)主管c開發(fā)軟件工程高級開發(fā)后端開發(fā)Java技術(shù)專家java工程師區(qū)塊鏈工程師程序員c語言軟件開發(fā)程序員springboot計算機軟件開發(fā)python開發(fā)數(shù)據(jù)采集java開發(fā)工程師產(chǎn)品開發(fā)經(jīng)理c語言開發(fā)計算機專業(yè)實習(xí)生物聯(lián)網(wǎng)軟件開發(fā)工程師gis地理信息ERP技術(shù)腳本開發(fā)erp開發(fā)軟件工程師PHP.NET軟件研發(fā)人員地理信息系統(tǒng)java軟件研發(fā)
- 廣西迅龍軟件開發(fā)有限公司
- 所在行業(yè) 安防/計算機/軟件
- 成立時間 2年(2022年1月27日)
- 企業(yè)性質(zhì) 有限責(zé)任
- 公司規(guī)模 10人以下