大數(shù)據(jù)架構(gòu)師
23000-26000元
廣州
應(yīng)屆畢業(yè)生
本科



- 全勤獎(jiǎng)
- 節(jié)日福利
- 不加班
- 周末雙休
職位描述
該職位還未進(jìn)行加V認(rèn)證,請(qǐng)仔細(xì)了解后再進(jìn)行投遞!
【崗位職責(zé)】:
1、大數(shù)據(jù)平臺(tái)架構(gòu)設(shè)計(jì)與規(guī)劃
- 根據(jù)集團(tuán)業(yè)務(wù)需求及技術(shù)發(fā)展趨勢(shì),主導(dǎo)大數(shù)據(jù)平臺(tái)的整體架構(gòu)設(shè)計(jì),確保平臺(tái)具備高穩(wěn)定性、可擴(kuò)展性及高效性,制定長(zhǎng)期技術(shù)演進(jìn)路線。
- 設(shè)計(jì)數(shù)據(jù)存儲(chǔ)、計(jì)算引擎、數(shù)據(jù)集成與治理等核心模塊的技術(shù)架構(gòu),優(yōu)化數(shù)據(jù)采集、清洗、存儲(chǔ)及分析流程。
2 、技術(shù)選型與平臺(tái)搭建
- 負(fù)責(zé)大數(shù)據(jù)技術(shù)棧的選型(如Hadoop/CDH、Spark、Flink、Kafka等),搭建并維護(hù)基于CDH的分布式大數(shù)據(jù)平臺(tái),確保技術(shù)組件與業(yè)務(wù)場(chǎng)景高度適配。
- 主導(dǎo)數(shù)據(jù)倉(cāng)庫(kù)建模、實(shí)時(shí)流計(jì)算框架開(kāi)發(fā),支持BI分析及數(shù)據(jù)挖掘應(yīng)用。
3 、平臺(tái)運(yùn)維體系化構(gòu)建
- 建立全鏈路監(jiān)控體系,覆蓋硬件資源(CPU/存儲(chǔ)/網(wǎng)絡(luò))、系統(tǒng)服務(wù)(HDFS/YARN)、數(shù)據(jù)質(zhì)量(ETL任務(wù)、延遲率)等維度,制定標(biāo)準(zhǔn)化監(jiān)控指標(biāo)與告警規(guī)則。
- 設(shè)計(jì)自動(dòng)化運(yùn)維工具與流程,處理平臺(tái)故障及預(yù)警事件,保障7×24小時(shí)高可用性。
4 、性能優(yōu)化與監(jiān)控
- 分析平臺(tái)性能瓶頸,優(yōu)化計(jì)算任務(wù)調(diào)度、存儲(chǔ)資源分配及集群負(fù)載均衡,提升數(shù)據(jù)處理效率(如Spark作業(yè)調(diào)優(yōu)、Hive查詢(xún)加速)。
- 定期開(kāi)展壓力測(cè)試與容量規(guī)劃,預(yù)判資源需求并動(dòng)態(tài)調(diào)整集群規(guī)模。
5 、數(shù)據(jù)安全機(jī)制建設(shè)
- 制定數(shù)據(jù)安全策略,包括敏感數(shù)據(jù)加密、訪問(wèn)權(quán)限控制(基于RBAC模型)、審計(jì)日志追蹤等,防止數(shù)據(jù)泄露與非法訪問(wèn)。
- 設(shè)計(jì)災(zāi)備方案與數(shù)據(jù)恢復(fù)機(jī)制,確保數(shù)據(jù)完整性與業(yè)務(wù)連續(xù)性。
【任職要求】:
1 、學(xué)歷與經(jīng)驗(yàn)
- 本科及以上學(xué)歷,計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)或相關(guān)專(zhuān)業(yè),5年以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn),3年以上大型分布式系統(tǒng)(PB級(jí)數(shù)據(jù))實(shí)戰(zhàn)經(jīng)驗(yàn)。
2 、技術(shù)能力
- 精通Hadoop生態(tài)技術(shù)(HDFS/Hive/HBase/Spark/Flink),熟悉CDH平臺(tái)部署與運(yùn)維,具備源碼級(jí)調(diào)優(yōu)能力。
- 掌握數(shù)據(jù)治理工具(如Apache Atlas)、實(shí)時(shí)計(jì)算框架(如Storm/Kafka Streams)及容器化技術(shù)(Docker/Kubernetes)。
- 熟悉數(shù)據(jù)安全標(biāo)準(zhǔn)(如GDPR),具備數(shù)據(jù)脫敏、權(quán)限管理及安全審計(jì)實(shí)施經(jīng)驗(yàn)。
3 、運(yùn)維與問(wèn)題解決
- 具備全鏈路故障排查能力,熟悉運(yùn)維工具鏈(如Prometheus/Grafana/Zabbix),能快速定位并解決集群性能問(wèn)題。
- 主導(dǎo)過(guò)大數(shù)據(jù)平臺(tái)從0到1的建設(shè),有金融、能源等高安全要求行業(yè)經(jīng)驗(yàn)優(yōu)先。
4 、軟技能
- 優(yōu)秀的跨部門(mén)溝通能力,能主導(dǎo)技術(shù)方案評(píng)審并推動(dòng)落地,具備團(tuán)隊(duì)管理與技術(shù)培訓(xùn)經(jīng)驗(yàn)。
- 對(duì)技術(shù)前沿敏感,持續(xù)關(guān)注AI/機(jī)器學(xué)習(xí)與大數(shù)據(jù)融合趨勢(shì)(如TensorFlow在數(shù)據(jù)分析中的應(yīng)用)。
【豐厚福利,團(tuán)隊(duì)全方位關(guān)懷】
周末雙休、住房/通訊/交通/餐費(fèi)補(bǔ)貼、五險(xiǎn)一金、補(bǔ)充商業(yè)險(xiǎn)、年度體檢、帶薪病假、帶薪年假、節(jié)假日禮品、團(tuán)建基金等。
工作地點(diǎn)
地址:廣州番禺區(qū)廣州-番禺區(qū)海大科學(xué)園2號(hào)樓6樓


職位發(fā)布者
滿(mǎn)先生HR
廣東海大集團(tuán)股份有限公司

-
快速消費(fèi)品
-
1000人以上
-
股份制企業(yè)
-
番禺區(qū)番禺大道北555號(hào)天安節(jié)能科技園創(chuàng)新大廈213
相似職位
-
阿里云智能-解決方案架構(gòu)師(公共云方向)-河南 10000-20000元應(yīng)屆畢業(yè)生 本科阿里巴巴(中國(guó))有限公司
-
輕工紡織 - 服裝紡織 面議不限 不限河南佳聚紡織有限公司
-
技術(shù)中臺(tái)架構(gòu)師 13000-16000元應(yīng)屆畢業(yè)生 碩士鄭州指南人力資源服務(wù)有限公司
-
印刷事業(yè)部產(chǎn)品經(jīng)理 6000-8000元應(yīng)屆畢業(yè)生 大專(zhuān)鄭州鴻盛數(shù)碼科技
-
生產(chǎn)管理預(yù)備干部 6000-10000元應(yīng)屆畢業(yè)生 大專(zhuān)社旗牧原農(nóng)牧有限公司
-
加工廠生產(chǎn)管理 面議應(yīng)屆畢業(yè)生 不限河南景天膜結(jié)構(gòu)工程有限公司