亚洲欧美不卡-亚洲欧美日本人成在线观看-亚洲欧美日本综合一区二区三区-亚洲欧美日韩v中文在线-久久久久嫩草影院精品-久久久久欧美国产精品

1.負責設計和開發(fā)分布式爬蟲系統(tǒng)，進行多平臺多終端信息的抓取和分析； 2.建立完整的數(shù)據(jù)獲取、解析、入庫和監(jiān)控流程，優(yōu)化系統(tǒng)瓶頸，不斷迭代完善； 3.有驗證碼破解、反扒、分布式爬蟲架構(gòu)經(jīng)驗； 4.研究優(yōu)化算法，提升爬蟲系統(tǒng)的穩(wěn)定性和可擴展性； 5.快速支撐產(chǎn)品所需數(shù)據(jù)落地； 任職要求： 1.3年以上工作經(jīng)驗，計算機、電子、數(shù)學、統(tǒng)計學等相關(guān)專業(yè)及本科以上學歷； 2.python語言基礎扎實，熟練使用python，熟悉linux對應的開發(fā)環(huán)境 3.熟悉反扒機制； 4.精通爬蟲原理、熟悉scrapy、pyspider等框架； 5.熟悉mysql,mongodb等數(shù)據(jù)庫 6.能夠熟練使用flask，Tornado等Web框架開發(fā)，會用numpy,pandas等數(shù)據(jù)分析工具為加分項 7.優(yōu)秀的分析、解決問題能力，對未知的、挑戰(zhàn)性問題充滿激情 8.人品正直，有原則，有一顆奮斗拼搏的心。