大數據（big data），指無法在一定時間范圍內用常規軟件工具進行捕捉、管理和處理的數據集合，是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產 大數據工程師是根據大數據來的一種職業。

為什么越來越多人學習大數據？

行業前景好

大數據相關人才的欠缺將會成為影響大數據市場發展的一個重要因素

人才需求大

《大數據人才報告》指出，未來3-5年內將會出現150萬的大數據人才的缺口

就業薪水高

大數據方面職位列在本?？茖I畢業生“高薪榜”前五且人才缺少

發展潛力大

中國的大數據市場規模已達到2485億元， 并且市場規模每年都在持續上升

緊扣行業需求，傳授專業知識

課程階段 課程內容 Hadoop離線計算 大數據概述和Hadoop環境安裝 云計算和分布式、大數據應用場景、分布式文件系統設計原理、Hadoop集群環境的安裝、HDFS的基本操作(命令行)、HDFS的配置文件的核心相關參數。 HDFS原理和應用 HDFS原理分析、HDFS工作流程分析、訪問HDFS、分布式日志采集案例。 MapReduce和Yarn MapReducer原理分析、MapReducer的算法模型、MapReduce和Yarn集群的配置、Yarn模型的運行管理機制、MapReduce的本地運行模式。 MapReduce編程案例 流量統計、匯總排序、訂單分組topN、線段重疊統計、電影評分的topN、倒排索引、JOIN算法、MapReduce分布式啟動運行流程、MapReduce數據處理流程、數據傾斜。 Hadoop架構和源碼分析 數據倉庫 Hive Hive核心工作機制、Hive的安裝和運行、Hive的DDL操作、SQL語法加強。 Hive加強 Hive數據類型、單行函數、聚合函數和表生成函數、Hive案例、窗口函數、Hive自定義函數等。 Hadoop生態圈組件 Flume工作機制、Flume安裝和配置、Flume攔截器、Flume高可用、日志采集分類匯總、Sqoop工作機制、Sqoop的安裝部署、Sqoop的導入導出案例案例、Azkaban的工作流調度器介紹、Azkaban的安裝部署和使用配置等。 HBASE HBASE概述和核心特點、HBASE工作原理、HBASE的集群部署、shell客戶端的基本操作、Java操作HBASE、HBASE讀寫操作和流程等。 Storm實時計算 Storm編程入門 Storm概述和原理、Storm的本地和集群模式、Storm的核心組件詳解、Storm的并行運算和分組運算、Storm集群執行過程分析，Storm案例。 Storm架構和源碼分析 Storm核心機制 Ack機制概述、Storm通信機制、Storm數據分發機制。 消息中間件Kafka的使用 KafKa概述和原理、KafKa的集群環境部署、KafKa的生產者和消費者、KafKa分組策略、KafKa配置詳解。 Scala語言 Scala語言基礎、Scala函數和方法、Scala數據結構、Scala面向對象、隱式參數、隱式參數類型轉換、泛型、視圖界定、上下文界定、Akka的RPC通信框架等。 Spark內存計算 Spark入門 Spark原理、Spark架構分析、Spark集群安裝、Spark-shell單機和集群、Spark任務執行流程、Spark程序調試。 Spark RDD RDD運行架構、Transformation操作API、RDD分區數據的讀取、Action操作API、Spark編程案例、自定義排序、Stage切分、Spark整體執行流程。 Spark SQL Spark SQL原理、Spark SQL應用場景、Spark SQL性能分析、Spark SQL的案例、Spark SQL函數。 Spark Streaming Stream運行架構、SparkStream工作原理、Spark Stream和KafKa整合、Spark Stream和Redis的整合等。 Spark架構和源碼分析 大數據項目 大型日志采集系統、大數據綜合項目 Python、人工智能

大數據的應用價值廣闊

互聯網行業 icon

借助于大數據技術，分析客戶行為，進行商品針對性廣告投放

娛樂行業 icon

哪種題財的影視作品更具價值，明星流量關注群體等數據分析

物流行業 icon

利用大數據優化物流的網絡，提高物流的效率，降低物流資金

能源行業 icon

利用大數據的技術分析用戶用電模式，設計電力需求響應系統

金融行業 icon

高頻交易、社交情緒分析和信貸風險分析三大金融創新領域發揮重大作用。

安全領域 icon

大數據技術構建起強大的安全體系，企業可以利用大數據抵御網絡攻擊。

餐飲行業 icon

利用大數據實現餐飲O2O模式，改變傳統餐飲經營方式。

電商行業 icon

利用數據挖掘來了解客戶的內在需求，消費群體消費能力等等。

叩丁狼為什么要聯合Java+大數據授課?

開發經驗

在企業中做大數據開發要求必須熟練掌握Java，必須擁有多年Java開發經驗。

合理運用

大數據中很多技術都基于JVM，如果不懂Java，不能很好運用Java，是沒法做好大數據開發。

熟練掌握

大數據中的Hadoop是采用Java語言開發的，不熟悉Java，如何深入研究Hadoop。

Scala語言

大數據中的Spark采用Scala語言實現，和Java很像，同時也是基于JVM。

思維經驗

沒有基本的開發思維和項目經驗，談何大數據開發？連基礎的小規模數據量項目都不能搞定。

項目經驗

沒有任何項目經驗和開發思維，就開始學大數據，無法領悟什么是數據量和項目經驗。

舒適環境、健康學習

icon

校區路口

icon

校區過道

icon

校區走廊

icon

上課環境

icon

沈陽校區

icon

校區走廊