1、精通Java、Scala、Python等至少一種編程語言,并具備豐富的編程實(shí)踐經(jīng)驗(yàn)。
2、深入理解Hadoop、Spark等大數(shù)據(jù)處理框架的內(nèi)部機(jī)制和工作原理,能夠熟練進(jìn)行框架的搭建、配置和優(yōu)化。
3、熟練掌握Hive、Pig等大數(shù)據(jù)處理工具,能夠高效地編寫和處理大規(guī)模數(shù)據(jù)集的SQL查詢和腳本。
4、熟悉數(shù)據(jù)倉庫和數(shù)據(jù)集市的設(shè)計(jì)原理,能夠獨(dú)立完成數(shù)據(jù)建模和數(shù)據(jù)倉庫的搭建工作。
5、具備豐富的數(shù)據(jù)清洗、轉(zhuǎn)換和整合經(jīng)驗(yàn),能夠處理復(fù)雜的數(shù)據(jù)質(zhì)量問題。
6、對數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)算法有深入的理解,能夠根據(jù)業(yè)務(wù)需求選擇合適的算法進(jìn)行建模和分析。
7、熟練掌握常見的分類、聚類、回歸、預(yù)測等算法,并能夠進(jìn)行算法的優(yōu)化和調(diào)優(yōu)工作。
8、熟悉大數(shù)據(jù)平臺的架構(gòu)設(shè)計(jì)、部署和運(yùn)維流程,能夠獨(dú)立完成平臺的搭建和日常維護(hù)工作。
9、了解分布式系統(tǒng)、并行計(jì)算和存儲系統(tǒng)的原理和實(shí)現(xiàn)方式,能夠?qū)Υ髷?shù)據(jù)平臺進(jìn)行優(yōu)化和性能調(diào)優(yōu)。
10、熟練掌握Kafka、Flink等流處理工具,能夠處理實(shí)時(shí)數(shù)據(jù)流并進(jìn)行實(shí)時(shí)分析。
團(tuán)隊(duì)協(xié)作:
1、具備良好的團(tuán)隊(duì)合作精神和溝通能力,能夠與團(tuán)隊(duì)成員和其他部門進(jìn)行有效的協(xié)作。
2、能夠參與項(xiàng)目的需求分析、設(shè)計(jì)、開發(fā)和測試工作,確保項(xiàng)目的按時(shí)交付和高質(zhì)量完成。
工作職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺的架構(gòu)設(shè)計(jì)、搭建和日常維護(hù)工作,確保平臺的穩(wěn)定運(yùn)行和高效性能。
2、對大數(shù)據(jù)處理框架(如Hadoop、Spark等)進(jìn)行選型、部署和優(yōu)化,提升數(shù)據(jù)處理能力。
3、根據(jù)業(yè)務(wù)需求,進(jìn)行數(shù)據(jù)的采集、清洗、轉(zhuǎn)換、存儲和分析工作。
4、編寫和優(yōu)化大數(shù)據(jù)處理腳本,提高數(shù)據(jù)處理效率和準(zhǔn)確性。
5、根據(jù)業(yè)務(wù)需求,提供數(shù)據(jù)分析和決策支持服務(wù)。
6、編寫數(shù)據(jù)分析報(bào)告和可視化展示,為業(yè)務(wù)團(tuán)隊(duì)提供數(shù)據(jù)參考和決策依據(jù)。
- 計(jì)算機(jī)軟件
- 51-99人
- 私營·民營企業(yè)
- 天全路200號無線通信國家專業(yè)化眾創(chuàng)空間8樓
-
成控預(yù)結(jié)算專員 面議成都 應(yīng)屆畢業(yè)生 學(xué)歷不限四川新桂防水保溫工程有限公司
-
國企信號配時(shí)優(yōu)化工程師 7000-9000元成都 應(yīng)屆畢業(yè)生 學(xué)歷不限四川才庫人力資源服務(wù)有限公司
-
國企軟件開發(fā)工程師 8000元以上成都 應(yīng)屆畢業(yè)生 學(xué)歷不限四川才庫人力資源服務(wù)有限公司
-
開發(fā)選址專員 面議成都 應(yīng)屆畢業(yè)生 學(xué)歷不限四川金忠食品股份有限公司
-
內(nèi)部駕駛員(五險(xiǎn)) 7000元以上成都 應(yīng)屆畢業(yè)生 學(xué)歷不限四川飛螞蟻汽車服務(wù)有限公司
-
環(huán)保工程師 面議成都 應(yīng)屆畢業(yè)生 學(xué)歷不限成都萬友濾機(jī)有限公司