聚力名企共建課程
傳智教育與百度云平臺、帆軟、北京大數(shù)據(jù)研究院共同研發(fā)實戰(zhàn)型大數(shù)據(jù)課程，并持續(xù)為課程輸入高端大數(shù)據(jù)技術。
咨詢了解更多信息● 參考阿里的數(shù)據(jù)中臺構建理論，設計數(shù)據(jù)資產化、創(chuàng)新敏捷化，平臺智能化、服務產品化等核心因素。
● 涵蓋大數(shù)據(jù)計算服務、大數(shù)據(jù)開發(fā)套件、數(shù)據(jù)主題域倉庫、元數(shù)據(jù)管理、數(shù)據(jù)地圖、系統(tǒng)分析、影響域分析、主數(shù)據(jù)、數(shù)據(jù)治理、數(shù)據(jù)服務引擎及數(shù)據(jù)可視化等內容。
● 手把手教會學員如何搭建數(shù)據(jù)中臺，學習通過數(shù)據(jù)技術，對海量數(shù)據(jù)進行采集、計算、存儲、加工，同時統(tǒng)一標準和口徑。
如何從大數(shù)據(jù)中發(fā)現(xiàn)和提取有價值的數(shù)據(jù)，使用數(shù)據(jù)挖掘SparkMI&MLlib等技術，達到數(shù)據(jù)價值化目標，助力于關鍵業(yè)務問題解決。
通過ALink（Flink機器學習）達到數(shù)據(jù)價值化目標，同時利用TensorflowOnFlink解決深度學習能力，為學員在大數(shù)據(jù)+AI領域助力。
從大數(shù)據(jù)數(shù)據(jù)采集、數(shù)據(jù)ETL、數(shù)據(jù)分析及機器學習建模構建全流程Pipeline，助力學員成為大數(shù)據(jù)高端人才。
掌握大數(shù)據(jù)數(shù)據(jù)挖掘技術，提高多業(yè)務場景解決數(shù)據(jù)
挖掘問題能力，培養(yǎng)數(shù)據(jù)分析與挖掘核心競爭力，
實現(xiàn)全棧大數(shù)據(jù)開發(fā)。
大數(shù)據(jù)基礎
體驗課
Java語言編程
Hadoop技術棧
后端數(shù)據(jù)微
服務接口開發(fā)
NoSQL存儲
Flink技術棧
Spark技術棧
? Linux操作系統(tǒng)? Apache Superset
? MySQL數(shù)據(jù)庫 可視化開發(fā)
? Kettle數(shù)據(jù)預處理? 電商運營指標分析
1、掌握企業(yè)級ETL平臺的kettle；
2、掌握BI的可視化平臺Superset；
3、掌握kettle流式數(shù)據(jù)ETL處理設計思想；
4、掌握大數(shù)據(jù)企業(yè)開發(fā)中最常見的的linux的操作；
5、掌握一款主流數(shù)據(jù)庫管理工具DataGrip；
6、掌握企業(yè)MySQL的調優(yōu)方案；
7、掌握大數(shù)據(jù)分析中數(shù)據(jù)全量及增量同步解決方案；
8、掌握生產環(huán)境中數(shù)據(jù)分析程序的部署解決方案。
? 編程基礎? 面向對象
? 常用類? 集合操作
? IO操作? Java基礎增強
? 爬蟲案例
1、掌握Java程序基礎數(shù)據(jù)類型；
2、掌握開發(fā)中常用類如集合、IO流、常用類等操作；
3、掌握Java異常處理機制；
4、掌握反射、網絡編程、多線程開發(fā)；
5、掌握Jsoup的網絡爬蟲開發(fā)；
6、掌握JDBC數(shù)據(jù)庫連接操作；
7、掌握ETL數(shù)據(jù)處理和BI報表開發(fā) 。
具備JavaSE開發(fā)能力
? Linux操作
系統(tǒng)高級? 大數(shù)據(jù)基礎和
硬件介紹
? Zookeeper? HDFS
? MapReduce? Yarn
? Hive
1、掌握Shell命令；
2、掌握zookeeper原理并應用；
3、掌握HDFS的使用和MapReduce編程；
4、理解MapReduce原理和調優(yōu)；
5、掌握Yarn的原理和調優(yōu)；
6、掌握Hive的使用和調優(yōu)。
具備Hadoop開發(fā)能力、離線數(shù)據(jù)倉庫開發(fā)能力。
? Spring? Spring Boot
? Spring Cloud
? Spring Cloud搜索案例
1、掌握SpringBoot整合SpringMVC開發(fā)；
2、掌握SpringBoot整合MyBatis開發(fā)；
3、掌握Eureka搭建；
4、掌握Feign的使用。
具備后端數(shù)據(jù)微服務接口開發(fā)，可勝任通過Spring技術架構完成微服務搭建。
可完成企業(yè)級數(shù)據(jù)微服務接口開發(fā)。
? Redis存儲? HBase存儲
? ELK
1、掌握Redis原理及架構；
2、掌握Redis命令操作、數(shù)據(jù)結構；
3、掌握Hbase原理及架構；
4、掌握HBase命令操作、MapReduce編程；
5、掌握Phoneix二級索引優(yōu)化查詢；
6、掌握ELK開發(fā)。
具備使用Hbase和Redis開發(fā)調優(yōu)能力、ELK海量數(shù)據(jù)處理能力。
? Kafka? Flink流式計算
? Flink批處理? Flink Core
? Flink SQL? Flink綜合案例
1、掌握Kafka原理及架構；
2、掌握KafkaStreams開發(fā)；
3、掌握基于Flink進行實時和離線數(shù)據(jù)處理、分析；
4、掌握基于Flink的多流并行處理技術；
5、掌握千萬級高速實時采集技術。
具備Kafka消息隊列開發(fā)和調優(yōu)能力、Flink流式和批量數(shù)據(jù)開發(fā)能力。
? Scala語言? Spark core
? Spark sql? SparkStreaming
? Structured streaming
1、掌握Scala語言基礎、數(shù)據(jù)結構；
2、掌握Scala語言高階語法特性；
3、掌握Spark的RDD、DAG、CheckPoint等設計思想；
4、掌握SparkSQL結構化數(shù)據(jù)處理，Spark On Hive整合；
5、掌握SparkStreaming整合Kafka完成實時數(shù)據(jù)處理；
6、掌握SparkStreaming偏移量管理及Checkpoint；
7、掌握Structured Streaming整合多數(shù)據(jù)源完成實時數(shù)據(jù)處理。
具備Spark全棧開發(fā)能力，滿足大數(shù)據(jù)行業(yè)多場景統(tǒng)一技術棧的數(shù)據(jù)開發(fā)，提供就業(yè)核心競爭力。
●實時監(jiān)控證券市場的市場每日的業(yè)務交易，實現(xiàn)對證券市場交易數(shù)據(jù)的統(tǒng)計分析
●搭建監(jiān)察預警體系，包括：預警規(guī)則管理，實時預警，歷史預警，監(jiān)察歷史數(shù)據(jù)分析等
●股市行情交易數(shù)據(jù)實時采集、實時數(shù)據(jù)分析、多維分析，即席查詢，實時大屏監(jiān)控展示
●涵蓋完整車聯(lián)網業(yè)務場景，包含駕駛行程、電子圍欄、遠程診斷等真實業(yè)務
●通過QBOX車輛終端數(shù)據(jù)收集，并解析為QSP數(shù)據(jù)、QCS數(shù)據(jù)、充電數(shù)據(jù)、HU數(shù)據(jù)
●提供實時計算服務與離線計算服務，并通過API接口以報表和大屏展示分析結果數(shù)據(jù)
●基于一家大型物流公司研發(fā)的智慧物流大數(shù)據(jù)平臺，日訂單上千萬
●圍繞訂單、運輸、倉儲、搬運裝卸、包裝以及流通加工等物流環(huán)節(jié)中涉及的數(shù)據(jù)信息等
●提高運輸以及配送效率、減少物流成本、更有效地滿足客戶服務要求，并針對數(shù)據(jù)分析結果，提出具有中觀指導意義的解決方案
●建立集團數(shù)據(jù)倉庫，統(tǒng)一集團數(shù)據(jù)中心，把分散的業(yè)務數(shù)據(jù)集中存儲和處理
●項目從需求調研、設計、版本控制、研發(fā)、測試到落地上線，涵蓋了項目的完整工序
●挖掘分析海量用戶行為數(shù)據(jù)，定制多維數(shù)據(jù)集合，形成數(shù)據(jù)集市，供各個場景主題使用。
●分析來自全品類B2B2C電商系統(tǒng)，以電商核心流程為主線進行數(shù)據(jù)分析，支撐運營
●建立基于用戶的全面分析體系，從多個維度建立基于用戶的運營體系
●實時分析用戶訪問流量、訂單、店鋪等運營指標
●基于垂直電商平臺構建的用戶全方位畫像，完整抽取出一個用戶的信息全貌
●業(yè)務圍繞商品、訂單、用戶基礎信息及行為信息等數(shù)據(jù)
●實現(xiàn)用戶和商品基礎標簽、組合標簽、微觀畫像、標簽查詢等業(yè)務場景，提供了企業(yè)級多方位業(yè)務決策分析
●限制偽裝技術越來越強的爬蟲訪問和惡意占座行為，開發(fā)的大數(shù)據(jù)實時防爬工具
●旅游行業(yè)和出行行業(yè)通用的防爬規(guī)則，提升行業(yè)競爭優(yōu)勢
●完整高效通用的實時處理流程：數(shù)據(jù)采集、數(shù)據(jù)預處理、實時識別預警、離線分析
●包含狀態(tài)監(jiān)控、反爬指標配置、運營指標監(jiān)控展示等功能
●采用企業(yè)中真實的手機應用訪問數(shù)據(jù)，找到廣告系統(tǒng)中適應的人群，促進精準廣告投放
●建立用戶畫像系統(tǒng)，通過系統(tǒng)中的畫像特征，篩選出符合廣告主投放要求的用戶
●建立完整商圈庫，通過商圈庫確保廣告在在各個城市商圈的有效投放
●基于手機測速軟件采集數(shù)據(jù)對手機網速、上行下行流量、信號強度等信息進行宏觀分析
●計算用戶附近移動、聯(lián)通、電信信號強弱、不同方位信號強弱
●對比各家運營商提供有力的參考數(shù)據(jù)，如同一地標三家運營商信號強度
對Hadoop、Spark、Flink等大數(shù)據(jù)體系有深入研究，有豐富的離線計算和實時計算經驗。曾主導及參與空軍總部裝備信息化系統(tǒng)、國家衛(wèi)星氣象中心FY3C地面監(jiān)測系統(tǒng)、用戶畫像系統(tǒng)、分布式爬蟲系統(tǒng)、BI系統(tǒng)、歷史數(shù)據(jù)在線查詢系統(tǒng)、采集系統(tǒng)等項目的開發(fā)。
阿里云大數(shù)據(jù)ACP專業(yè)認證工程師，多年大數(shù)據(jù)開發(fā)及教育培訓經驗，主導開發(fā)過房地產公司ERP系統(tǒng)、在線教育大數(shù)據(jù)分析平臺、高校招生咨詢大數(shù)據(jù)集成系統(tǒng)、電商推薦系統(tǒng)等項目。熟悉Java、Scala、Python等編程語言，擅長Spark、Hadoop、Flink等大數(shù)據(jù)主流技術。
專注于億級用戶規(guī)模的大數(shù)據(jù)平臺研發(fā)建設和研發(fā)，歷任項目經理、高級專家、技術總監(jiān)等職務，主導設計游戲一體化運營平臺、通用大數(shù)據(jù)任務調度平臺實現(xiàn)公司各部門集群資源共享、離線任務數(shù)據(jù)分析平臺構建等，精通 C/C++、C#、Hadoop、Scala、Spark、Flink等有深入研究。
具有多年大數(shù)據(jù)項目開發(fā)實戰(zhàn)經驗，先后參與過東南大學水聲實驗室、佳通、SPDB等不同行業(yè)的大數(shù)據(jù)平臺的開發(fā)及實施，一直從事于HPC、云計算及大數(shù)據(jù)平臺的研發(fā)，擁有豐富的大數(shù)據(jù)開發(fā)經驗，對數(shù)據(jù)倉庫、實時大數(shù)據(jù)平臺、數(shù)據(jù)挖掘等領域有較深的研究。
多年大數(shù)據(jù)技術經驗，具有多年Hadoop、Flink、HBase、kafka、Redis、Flume、Spring Cloud等一線從業(yè)經驗，先后服務于上交所、上海銀行、中國郵政等，參與數(shù)據(jù)中心和電商平臺的大數(shù)據(jù)及JAVA EE的平臺設計和具體實施。
人工智能領域技術專家，多年模式識別和數(shù)據(jù)挖掘開發(fā)經驗，主導研發(fā)多項國家和省級科研項目，專注ML/DL/PR/KG領域相關算法的應用，曾負責企業(yè)級信貸風控模型和智能醫(yī)療數(shù)據(jù)平臺開發(fā)，對Hadoop、Spark、Tensorflow和PyTorch等大數(shù)據(jù)、人工智能技術有多年企業(yè)實踐經驗。
從事多年爬蟲與大數(shù)據(jù)開發(fā)與教學，對大數(shù)據(jù)的主流框架有著深入的理解，如hadoop、kafka、hive等，參與并主導的項目涉及分布式電商,數(shù)據(jù)爬取,離線分析等多個行業(yè),授課邏輯嚴謹，條理清晰，注重學生獨立解決問題的能力。
高級互聯(lián)網軟件工程師，曾擔任某物流公司CRM開發(fā)團隊TL。多年大數(shù)據(jù)領域研發(fā)經驗。擅長分布式開發(fā)和離線處理計算。對Hadoop、Flume、kafka、spark、ELK等大數(shù)據(jù)生態(tài)領域技術有一定的實踐經驗。
曾任IBM項目經理，主導IBM Platform KPI BI系統(tǒng)開發(fā)、e-support全球PMR智能調度分發(fā)系統(tǒng)開發(fā)；曾任國內大型中間件供應商，項目經理，主導國內最大的智能加油機供應商、大型鍛造廠CRM、統(tǒng)一服務平臺（ESB）項目研發(fā)、以及企業(yè)級BI項目。擅長Hadoop、Spark、Flink、Kylin、Druid等大數(shù)據(jù)技術有深入研究。
多年大數(shù)據(jù)研發(fā)，擔任過大數(shù)據(jù)工程師、項目經理、大數(shù)據(jù)架構師，曾主導企業(yè)級大數(shù)據(jù)平臺建設和多項大數(shù)據(jù)項目研發(fā)，對Hadoop、HBase、Spark等大數(shù)據(jù)計算引擎深入理解以及項目實際經驗。參與基于Flink的實時反欺詐風控、實時地鐵故障預警等流式計算平臺的設計和研發(fā)。
先后在途牛旅游網、卓望集團等公司擔任過經理、架構師和總監(jiān)等職務。擅長服務端的高可用及性能提升，熟悉常見的開源框架、微服務治理及海量數(shù)據(jù)性能優(yōu)化。曾負責和參與途牛旅游網的超級自由行、資源搜索等項目；負責江蘇移動的家庭網絡電視平臺架構等。
多年開發(fā)和教學經驗,精通C/C++，JavaEE，MySQL,Hadoop等技術,曾任職于中國電子科技集團公司第七研究所，擔任高級研發(fā)工程師，曾參與移動公司RFID智能資產管理系統(tǒng),中石油智能化數(shù)據(jù)分析系統(tǒng)等項目,講課風格：幽默風趣、通俗易懂、深入淺出。
軟件工程學士,熟練掌握Java,Android,大數(shù)據(jù)技術,專注于JavaEE企業(yè)級應用開發(fā),曾主導研發(fā)河南省畜牧局OA,河南省地稅局移動OA,中國移動渠道分析平臺,審計署(鄭州)內部考核自動化分析系統(tǒng)。
多年資深大數(shù)據(jù)開發(fā)工程師經驗，先后涉足Java、大數(shù)據(jù)、云計算等領域，熟悉大數(shù)據(jù)服務開發(fā)與云計算平臺開發(fā)，專注于互聯(lián)網APP后臺數(shù)據(jù)統(tǒng)計、分析、建模等流程；熟悉車輛網領域云計算平臺開發(fā)，擁有豐富的企業(yè)級大數(shù)據(jù)應用架構及開發(fā)經驗。
擁有5年大數(shù)據(jù)項目開發(fā)經驗，參與過千億級數(shù)據(jù)項目，精通hive、spark、flink等大數(shù)據(jù)開發(fā)工具。對技術一直抱有很大的熱情，喜歡研究各種新技術。主張快樂學習，由淺入深，讓學生輕松掌握課堂上教學的知識。
多年的項目研發(fā)與教學經驗，具有豐富的企業(yè)級數(shù)據(jù)倉庫和實時大數(shù)據(jù)開發(fā)經驗。精通Greenplum等分布式關系型數(shù)據(jù)庫，Hadoop大數(shù)據(jù)，F(xiàn)link實時流計算等大數(shù)據(jù)軟件開發(fā)及企業(yè)級數(shù)據(jù)倉庫開發(fā)，曾供職于德邦公司、東風汽車子公司、宇信科技、易愛科技等企業(yè)，先后擔任過高級軟件開發(fā)工程師，項目架構師。
高級大數(shù)據(jù)開發(fā)工程師，曾擔任某互聯(lián)網公司大數(shù)據(jù)部門TL。負責主導了多個0到1大數(shù)據(jù)平臺的落地實施，并在其中擔任主力研發(fā)人員。具有多年大數(shù)據(jù)領域和云平臺研發(fā)經驗，曾管理維護上PB級數(shù)據(jù)量的大規(guī)模集群，有海量數(shù)據(jù)的實際處理經驗。精通Java、Scala、Python等多種開發(fā)語言。
從事多年互聯(lián)網和大數(shù)據(jù)平臺研發(fā)，主導和參與電商、醫(yī)療、通信等領域的項目開發(fā)，具有豐富的行業(yè)解決方案經驗，對Hadoop、Kafka、Hive等大數(shù)據(jù)生態(tài)領域技術有深入研究。擅長教學和應用實踐結合的方式為學員分享技術，驅動學員技術的應用性、思維的擴散性。
缺乏工作經驗和技能，對未來沒有明確的規(guī)劃，期望通過學習大數(shù)據(jù)躋身IT行業(yè)的人員
目前工作待遇不理想，上升空間有限或已進入職業(yè)瓶頸期，想要突破轉行的人員
具有一定的大數(shù)據(jù)技術理論基礎，需要了解大數(shù)據(jù)技術在實際業(yè)務中如何使用的人員
有較強的思維邏輯能力，應對復雜業(yè)務場景處理，對大數(shù)據(jù)技術感興趣的人員
統(tǒng)計數(shù)據(jù)顯示，無論你是非計算機專業(yè)或計算機專業(yè)，
沒有工作經驗或有一定工作經驗，都可以學大數(shù)據(jù)課程。
大數(shù)據(jù)寫入政府工作報告，被列入國家發(fā)展戰(zhàn)略，助力中國經濟從高速增長轉向高質量發(fā)展。
不管是傳統(tǒng)領域，還是新興領域，都需要大數(shù)據(jù)人才進行大數(shù)據(jù)的采集、分析、開發(fā)、應用等。
各大主流招聘網站信息年增長189%，大數(shù)據(jù)人才缺口巨大，十大高薪職業(yè)之一，供求比超過1:14。