職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
崗位職責(zé):
1、負責(zé)公司Hadoop集群資源管理調(diào)度器優(yōu)化,包括但不限于集群規(guī)模、調(diào)度吞吐能力、資源利用率等多個方向。
2、負責(zé)大數(shù)據(jù)底層技術(shù)組件社區(qū)跟進、關(guān)鍵問題攻關(guān),解決平臺應(yīng)用開發(fā)、數(shù)據(jù)開發(fā)、運維等用戶反饋的平臺技術(shù)難題。
3、根據(jù)公司業(yè)務(wù)場景需求,對現(xiàn)有底層技術(shù)組件進行穩(wěn)定性健康運行保障、性能優(yōu)化、二次開發(fā)、版本升級。
4、根據(jù)公司項目和業(yè)務(wù)發(fā)展特點,研究大數(shù)據(jù)相關(guān)前沿技術(shù)。
任職要求:
1、基本要求:本科及以上學(xué)歷,計算機、數(shù)學(xué)等相關(guān)專業(yè)。
2、工作經(jīng)驗:5年以上工作經(jīng)驗,有開源社區(qū)主流項目的COMMITER和PMC經(jīng)驗者優(yōu)先。
3、知識技能:
1)熟練使用Hadoop、Spark、Flink等大數(shù)據(jù)技術(shù),熟悉SQL、Java、Scala、Python等編程語言;
2)熟悉Spark、Presto/Trino、Flink、Hive、Impala等主流大數(shù)據(jù)系統(tǒng)原理及源碼,可以對底層組件進行源碼二次開發(fā);
3)有超PB級別大數(shù)據(jù)處理實戰(zhàn)經(jīng)驗,熟悉整個大數(shù)據(jù)的完整處理流程,優(yōu)秀的問題解決能力;
4)熟悉主流的OLAP引擎的優(yōu)化原理,向量化執(zhí)行、Filter下推、物化視圖、列式存儲等;
5)熟悉HUDI、Iceberg或者DeltaLake 為代表的數(shù)據(jù)湖技術(shù)。
4、素質(zhì)要求:積極主動,責(zé)任心強,執(zhí)行高效,良好的溝通和團隊協(xié)作能力,善于解決和分析問題。
工作地點
地址:鄭州管城回族區(qū)鄭州萬眾大廈20-22F
以擔(dān)保或任何理由索取財物,扣押證照,均涉嫌違法,請?zhí)岣呔?
職位發(fā)布者
李玉林HR
河南中原消費金融股份有限公司
- 基金·證券·期貨·投資
- 200-499人
- 公司性質(zhì)未知
- 管城回族區(qū)康寧街99號萬眾大廈22層
相似職位
-
印刷行業(yè)渠道業(yè)務(wù)員 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限河南海寧彩印有限公司
-
激光打印操作員/數(shù)碼印刷/社保 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限河南美高美文化傳媒有限公司
-
印刷品后期裝訂 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限河南美高美文化傳媒有限公司
-
印刷機長 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限河南美高美文化傳媒有限公司
-
印刷排版客服 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限河南美高美文化傳媒有限公司
-
印刷設(shè)計排版 面議鄭州 應(yīng)屆畢業(yè)生 學(xué)歷不限鄭州東升印務(wù)有限公司