IT小白向大數據領域邁進
掌握實用技能
增長經驗
搭建完善的項目
接觸廣泛技術面
學習前沿技術
突破職業瓶頸
掌握核心技能
Linux、Hadoop
Java、Hive
Flume、Kafka
等基礎框架
熟練使用Doris
充分掌握Doris概念與構建流程
熟練應用數倉建模理論
熟練掌握Doris與其他大數據框架的集成
采用當前大廠非常流行的Doris框架,實現統一數倉架構;
多方參考大廠數倉分層體系,合理數據分層,降低數據耦合度,提高數據分析效率,降低數據計算成本。
采用SeaTunnel監控業務數據變動情況,做到實時準確的采集變動數據。
采用SeaTunnel采集用戶行為日志數據,實時同步到Doris;
ODS層、DWD層、DIM層、DWS層和ADS層之間采用Doris+ DolphinScheduler框架10分鐘調度一次處理,真正做到統一數倉。
采用FineBI對結果數據進行多圖表、儀表盤可視化展示;
分析總結項目搭建過程中遇到的問題,增加開發經驗,提升實戰問題解決能力。