職位描述
該職位信息待核驗,請仔細了解后再進行投遞!
【崗位職責】:
1、大數(shù)據(jù)平臺架構設計與規(guī)劃
- 根據(jù)集團業(yè)務需求及技術發(fā)展趨勢,主導大數(shù)據(jù)平臺的整體架構設計,確保平臺具備高穩(wěn)定性、可擴展性及高效性,制定長期技術演進路線。
- 設計數(shù)據(jù)存儲、計算引擎、數(shù)據(jù)集成與治理等核心模塊的技術架構,優(yōu)化數(shù)據(jù)采集、清洗、存儲及分析流程。
2 、技術選型與平臺搭建
- 負責大數(shù)據(jù)技術棧的選型(如Hadoop/CDH、Spark、Flink、Kafka等),搭建并維護基于CDH的分布式大數(shù)據(jù)平臺,確保技術組件與業(yè)務場景高度適配。
- 主導數(shù)據(jù)倉庫建模、實時流計算框架開發(fā),支持BI分析及數(shù)據(jù)挖掘應用。
3 、平臺運維體系化構建
- 建立全鏈路監(jiān)控體系,覆蓋硬件資源(CPU/存儲/網絡)、系統(tǒng)服務(HDFS/YARN)、數(shù)據(jù)質量(ETL任務、延遲率)等維度,制定標準化監(jiān)控指標與告警規(guī)則。
- 設計自動化運維工具與流程,處理平臺故障及預警事件,保障7×24小時高可用性。
4 、性能優(yōu)化與監(jiān)控
- 分析平臺性能瓶頸,優(yōu)化計算任務調度、存儲資源分配及集群負載均衡,提升數(shù)據(jù)處理效率(如Spark作業(yè)調優(yōu)、Hive查詢加速)。
- 定期開展壓力測試與容量規(guī)劃,預判資源需求并動態(tài)調整集群規(guī)模。
5 、數(shù)據(jù)安全機制建設
- 制定數(shù)據(jù)安全策略,包括敏感數(shù)據(jù)加密、訪問權限控制(基于RBAC模型)、審計日志追蹤等,防止數(shù)據(jù)泄露與非法訪問。
- 設計災備方案與數(shù)據(jù)恢復機制,確保數(shù)據(jù)完整性與業(yè)務連續(xù)性。
【任職要求】:
1 、學歷與經驗
- 本科及以上學歷,計算機、數(shù)學、統(tǒng)計學或相關專業(yè),5年以上大數(shù)據(jù)架構設計經驗,3年以上大型分布式系統(tǒng)(PB級數(shù)據(jù))實戰(zhàn)經驗。
2 、技術能力
- 精通Hadoop生態(tài)技術(HDFS/Hive/HBase/Spark/Flink),熟悉CDH平臺部署與運維,具備源碼級調優(yōu)能力。
- 掌握數(shù)據(jù)治理工具(如Apache Atlas)、實時計算框架(如Storm/Kafka Streams)及容器化技術(Docker/Kubernetes)。
- 熟悉數(shù)據(jù)安全標準(如GDPR),具備數(shù)據(jù)脫敏、權限管理及安全審計實施經驗。
3 、運維與問題解決
- 具備全鏈路故障排查能力,熟悉運維工具鏈(如Prometheus/Grafana/Zabbix),能快速定位并解決集群性能問題。
- 主導過大數(shù)據(jù)平臺從0到1的建設,有金融、能源等高安全要求行業(yè)經驗優(yōu)先。
4 、軟技能
- 優(yōu)秀的跨部門溝通能力,能主導技術方案評審并推動落地,具備團隊管理與技術培訓經驗。
- 對技術前沿敏感,持續(xù)關注AI/機器學習與大數(shù)據(jù)融合趨勢(如TensorFlow在數(shù)據(jù)分析中的應用)。
【豐厚福利,團隊全方位關懷】
周末雙休、住房/通訊/交通/餐費補貼、五險一金、補充商業(yè)險、年度體檢、帶薪病假、帶薪年假、節(jié)假日禮品、團建基金等。
工作地點
地址:廣州番禺區(qū)廣州-番禺區(qū)海大科學園2號樓6樓
??
點擊查看地圖
詳細位置,可以參考上方地址信息
求職提示:用人單位發(fā)布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業(yè)證等),均涉嫌違法,請求職者務必提高警惕。
職位發(fā)布者
滿先生HR
廣東海大集團股份有限公司
-
快速消費品
-
1000人以上
-
股份制企業(yè)
-
番禺區(qū)番禺大道北555號天安節(jié)能科技園創(chuàng)新大廈213

應屆畢業(yè)生
本科
最近更新
5709人關注
注:聯(lián)系我時,請說是在河北人才網上看到的。
