1、參與建設(shè)大規(guī)模數(shù)據(jù)的在線/離線基礎(chǔ)架構(gòu),并根據(jù)上層業(yè)務(wù)需求和計(jì)算邏輯持續(xù)優(yōu)化;
2、參與建設(shè)數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)的子系統(tǒng),包括不限于:調(diào)度系統(tǒng)、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量監(jiān)控、高效數(shù)據(jù)同步、流式數(shù)據(jù)采集、多維數(shù)據(jù)分析引擎等;
3、解決和優(yōu)化業(yè)務(wù)人員在開(kāi)發(fā)過(guò)程中遇到的計(jì)算平臺(tái)優(yōu)化、數(shù)據(jù)處理技術(shù)、基礎(chǔ)工具使用等技術(shù)問(wèn)題;
4、研究大數(shù)據(jù)前沿技術(shù),探索應(yīng)用于各系統(tǒng)和產(chǎn)品。
1、統(tǒng)招碩士及以上學(xué)歷,計(jì)算機(jī)相關(guān)專(zhuān)業(yè);
2、熟悉Hadoop,Hive,Hbase,Spark,Flink,Flume等開(kāi)源技術(shù),熟練掌握至少一種編程語(yǔ)言(Java、Python、Scala);
3、熟悉分布式系統(tǒng)架構(gòu)或模型,對(duì)資源管理、調(diào)度算法、并行數(shù)據(jù)處理有自己的理解;
4、思維敏捷,對(duì)新技術(shù)和數(shù)據(jù)敏感,有較強(qiáng)的鉆研學(xué)習(xí)能力。
職位類(lèi)別:
其他后端開(kāi)發(fā)
舉報(bào)