【崗位職責(zé)】： 1、大數(shù)據(jù)平臺(tái)架構(gòu)設(shè)計(jì)與規(guī)劃 - 根據(jù)集團(tuán)業(yè)務(wù)需求及技術(shù)發(fā)展趨勢(shì)，主導(dǎo)大數(shù)據(jù)平臺(tái)的整體架構(gòu)設(shè)計(jì)，確保平臺(tái)具備高穩(wěn)定性、可擴(kuò)展性及高效性，制定長(zhǎng)期技術(shù)演進(jìn)路線。 - 設(shè)計(jì)數(shù)據(jù)存儲(chǔ)、計(jì)算引擎、數(shù)據(jù)集成與治理等核心模塊的技術(shù)架構(gòu)，優(yōu)化數(shù)據(jù)采集、清洗、存儲(chǔ)及分析流程。 2 、技術(shù)選型與平臺(tái)搭建 - 負(fù)責(zé)大數(shù)據(jù)技術(shù)棧的選型（如Hadoop/CDH、Spark、Flink、Kafka等），搭建并維護(hù)基于CDH的分布式大數(shù)據(jù)平臺(tái)，確保技術(shù)組件與業(yè)務(wù)場(chǎng)景高度適配。 - 主導(dǎo)數(shù)據(jù)倉(cāng)庫(kù)建模、實(shí)時(shí)流計(jì)算框架開發(fā)，支持BI分析及數(shù)據(jù)挖掘應(yīng)用。 3 、平臺(tái)運(yùn)維體系化構(gòu)建 - 建立全鏈路監(jiān)控體系，覆蓋硬件資源（CPU/存儲(chǔ)/網(wǎng)絡(luò)）、系統(tǒng)服務(wù)（HDFS/YARN）、數(shù)據(jù)質(zhì)量（ETL任務(wù)、延遲率）等維度，制定標(biāo)準(zhǔn)化監(jiān)控指標(biāo)與告警規(guī)則。 - 設(shè)計(jì)自動(dòng)化運(yùn)維工具與流程，處理平臺(tái)故障及預(yù)警事件，保障7×24小時(shí)高可用性。 4 、性能優(yōu)化與監(jiān)控 - 分析平臺(tái)性能瓶頸，優(yōu)化計(jì)算任務(wù)調(diào)度、存儲(chǔ)資源分配及集群負(fù)載均衡，提升數(shù)據(jù)處理效率（如Spark作業(yè)調(diào)優(yōu)、Hive查詢加速）。 - 定期開展壓力測(cè)試與容量規(guī)劃，預(yù)判資源需求并動(dòng)態(tài)調(diào)整集群規(guī)模。 5 、數(shù)據(jù)安全機(jī)制建設(shè) - 制定數(shù)據(jù)安全策略，包括敏感數(shù)據(jù)加密、訪問(wèn)權(quán)限控制（基于RBAC模型）、審計(jì)日志追蹤等，防止數(shù)據(jù)泄露與非法訪問(wèn)。 - 設(shè)計(jì)災(zāi)備方案與數(shù)據(jù)恢復(fù)機(jī)制，確保數(shù)據(jù)完整性與業(yè)務(wù)連續(xù)性。 【任職要求】： 1 、學(xué)歷與經(jīng)驗(yàn) - 本科及以上學(xué)歷，計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)或相關(guān)專業(yè)，5年以上大數(shù)據(jù)架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)，3年以上大型分布式系統(tǒng)（PB級(jí)數(shù)據(jù)）實(shí)戰(zhàn)經(jīng)驗(yàn)。 2 、技術(shù)能力 - 精通Hadoop生態(tài)技術(shù)（HDFS/Hive/HBase/Spark/Flink），熟悉CDH平臺(tái)部署與運(yùn)維，具備源碼級(jí)調(diào)優(yōu)能力。 - 掌握數(shù)據(jù)治理工具（如Apache Atlas）、實(shí)時(shí)計(jì)算框架（如Storm/Kafka Streams）及容器化技術(shù)（Docker/Kubernetes）。 - 熟悉數(shù)據(jù)安全標(biāo)準(zhǔn)（如GDPR），具備數(shù)據(jù)脫敏、權(quán)限管理及安全審計(jì)實(shí)施經(jīng)驗(yàn)。 3 、運(yùn)維與問(wèn)題解決 - 具備全鏈路故障排查能力，熟悉運(yùn)維工具鏈（如Prometheus/Grafana/Zabbix），能快速定位并解決集群性能問(wèn)題。 - 主導(dǎo)過(guò)大數(shù)據(jù)平臺(tái)從0到1的建設(shè)，有金融、能源等高安全要求行業(yè)經(jīng)驗(yàn)優(yōu)先。 4 、軟技能 - 優(yōu)秀的跨部門溝通能力，能主導(dǎo)技術(shù)方案評(píng)審并推動(dòng)落地，具備團(tuán)隊(duì)管理與技術(shù)培訓(xùn)經(jīng)驗(yàn)。 - 對(duì)技術(shù)前沿敏感，持續(xù)關(guān)注AI/機(jī)器學(xué)習(xí)與大數(shù)據(jù)融合趨勢(shì)（如TensorFlow在數(shù)據(jù)分析中的應(yīng)用）。 【豐厚福利，團(tuán)隊(duì)全方位關(guān)懷】 周末雙休、住房/通訊/交通/餐費(fèi)補(bǔ)貼、五險(xiǎn)一金、補(bǔ)充商業(yè)險(xiǎn)、年度體檢、帶薪病假、帶薪年假、節(jié)假日禮品、團(tuán)建基金等。