大數據被認為是“未來的新石油”，也被比喻為21世紀的“鉆石礦”，在社會生產、流通、分配、消費活動以及經濟運行機制等方面發揮著重要的作用。
《大數據標準化白 皮 書（2020版）》梳理了國 內外主要國 家、地區大數據領域的發展戰略，描述了大數據核心技術和產業應用現狀，力圖從政策、技術、產業等多個角度，勾畫出當前大數據發展的整體脈絡。同時結合大數據發展的最 新態勢及熱點方向，迭代完善形成了新時期的大數據標準體系，并提出了我國大數據標準化工作建議。

一.JavaSE階段核心技術點
1.Java基本語法
2.面向對象
3.API
4.Eclipse開發工具的使用
5.集 合的底層原理
6.基本算法
7.jvm參數
8.JDK8的部分特性
9.IO、線程、套接字、反射使用
10.EasyMall項目開發
二.WEb前端及常用框架
1.XML、HTML/CSS
2.JavaScript、Jquery、JDBC、Servlet
3.Tomcat/HTTPCookie/Session
4.JSP/EL表達式/JSTL標簽庫
5.MVC設計模式/三層架構
6.JavaWeb高 級開發技術
7.數據庫高 級開發技術
8.EasyMall項目開發
三.JavaEE框架
1.Tomcat服務器安裝、以及常用配置
2.Servlet基礎、Servlet生命周期
3.jsp基本語法、九大內置對象以及常用方法、四個屬性范圍
4.Filter過濾器、Listener監聽器、使用過濾器實現登錄權限攔截和字符編碼集設置
5.MVC設計模式，完成圖書管理系統的添加等功能
6.使用JSON+Ajax技術完成異步交互操作
7.完成網上書城項目：（圖書管理+購物車系統）
四.數據庫
1.Oracle數據庫介紹、安裝與卸載、常用命令使用
2.數據庫表的約束（主鍵約束、唯一約束、非空約束、檢查約束、外鍵約束）
3.數據庫常用函數（字符串函數、日期函數、轉換函數、數學函數、通用函數、聚合函數）
4.Oracle數庫的偽列（rowId、rownum）及其分頁、用戶、權限、角色
5.PLSQL編程、運算符、基本語法
6.PLSQL中的程序結構：選擇結構、循環結構
7.JDBC以及圖書管理系統案例
8.使用Properties讀取屬性文件、c3p0、dbcp、druid數據庫連接池
五.Spark生態體
standalone模式資源調度和任務調度原理yarn模式資源調 度和任務調度原理spark術語寬窄依賴sparkstage pipeline計算模式粗粒度與細粒度資源調度推測執行二次排序分組topn spark源碼分析廣播變量累加器webui master ha sparkshuffle spark文件尋址內存管理shark sparksql謂詞下推dataframe操作spark on hive udf udaf開窗函數sparkstreaming原理流失框架對比分析數據流程算子操作窗口操作
六.Flink生態體系
flink架構原理flink實時計算框架無 界數據流有界數據流flinkcheckpoint savepoint flink窗口操作容錯檢查點flink任務提交算子鏈flink集群搭建flink ha任務槽flink datastage flink datastream flinksql flink on yarn flink+kafka整合flink廣播變量flink累加器flinktime watermark并行設置flink ecp處理
數倉理論基礎oltp olap kylin架構原理kylin cube維度爆炸kylin配置事實表維度表星型模型雪花模型星座模型模型rowkey kylin元數據保存kylin jdbc訪問hive優化hive處理小文件hive jvm重用數據傾斜處理任務監控預分區spark數據結構優化資源優化并行度優化