初級數(shù)據(jù)倉庫開發(fā)工程師
1.2-1.4萬元/月崗位1
互聯(lián)網(wǎng)與傳統(tǒng)數(shù)倉技術棧背景
1. 具備數(shù)據(jù)倉庫建設、重構及遷移項目經(jīng)驗,熟悉整體方案設計流程
2. 擁有復雜負載類型數(shù)倉任務的改造、重寫與轉換實踐經(jīng)歷
3. 能根據(jù)遷移需求獨立編寫數(shù)據(jù)遷移腳本及相關流程(Hive/Spark/Python/SQL),具備一定的Python、Shell腳本開發(fā)能力
4. 具備百億級數(shù)據(jù)規(guī)模遷移實施與數(shù)據(jù)質(zhì)量保障經(jīng)驗者優(yōu)先,滿足上述任意兩點及以上即可
實時任務方向人才需求(1~2名)
熟練掌握SQL及至少1~2門編程語言,具備實際開發(fā)與性能調(diào)優(yōu)經(jīng)驗,掌握Python等腳本語言者更佳
崗位2
項目經(jīng)理
需具備互聯(lián)網(wǎng)數(shù)倉技術能力與項目管理雙重背景
非純管理型崗位,要求能結合技術深度參與客戶側方案設計、數(shù)據(jù)采集、問題定位、分析與決策過程
具有數(shù)據(jù)倉庫構建、任務遷移相關經(jīng)驗,涵蓋數(shù)據(jù)抽取、轉換、結構適配、全量導入、增量同步及數(shù)據(jù)校驗環(huán)節(jié)
具備百億級數(shù)據(jù)遷移場景下的性能優(yōu)化與質(zhì)量控制能力,能夠建立完整的遷移監(jiān)控體系、設置關鍵校驗節(jié)點并設計對賬機制,保障數(shù)據(jù)準確、一致與完整
5年以上數(shù)據(jù)類項目實戰(zhàn)經(jīng)驗,具備主導跨團隊、數(shù)十人協(xié)作項目落地經(jīng)驗者優(yōu)先
精通SQL及至少1~2門編程語言
深入理解Spark、Flink、Hive等大數(shù)據(jù)系統(tǒng)架構與核心特性,了解常見軟件系統(tǒng)架構模式
崗位3
互聯(lián)網(wǎng)數(shù)倉技術棧背景
需具備獨立解決和推進復雜技術問題的能力,無需外部指導即可完成任務閉環(huán)
可根據(jù)遷移需求編寫數(shù)據(jù)遷移腳本及相關處理流程(Hive/Spark/Python/SQL),具備基礎Python、Shell腳本開發(fā)能力
擁有數(shù)據(jù)倉庫建設、重構、搬遷項目經(jīng)驗及方案設計能力
具備不同負載類型數(shù)倉任務的改造、重寫與任務遷移經(jīng)驗
具備百億級數(shù)據(jù)量級遷移實施與質(zhì)量保障實踐經(jīng)驗
實時任務方向人才需求(2~3名)
精通SQL及至少1~2門編程語言
熟悉Spark、Flink、Hive等數(shù)據(jù)處理系統(tǒng),了解其架構設計原理與功能特點
具備對其他主流軟件系統(tǒng)架構的基本認知