有不少想要學(xué)習(xí)大數(shù)據(jù)技術(shù)的同學(xué)對(duì)大數(shù)據(jù)技術(shù)學(xué)什么課程感到迷茫。今天小千就以千鋒教育大數(shù)據(jù)培訓(xùn)課程為例,為大家詳細(xì)介紹大數(shù)據(jù)技術(shù)課程大綱。大綱內(nèi)容涉及l(fā)inux操作基礎(chǔ)、shell編程、內(nèi)存數(shù)據(jù)庫(kù)redis、布式協(xié)調(diào)服務(wù)zookeeper、java高級(jí)特性增強(qiáng)、輕量級(jí)RPC框架開(kāi)發(fā)、hadoop快速入門(mén)、HDFS增強(qiáng)、MAPREDUCE、federation介紹和hive使用等內(nèi)容,具體介紹如下:
第一階段離線數(shù)倉(cāng)(7周)
掌握能力
掌握企業(yè)級(jí)基建環(huán)境部署、Hive和Spark數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)倉(cāng)庫(kù)搭建、數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)加載、數(shù)據(jù)應(yīng)用和京東離線ETL。
勝任職位
離線數(shù)據(jù)工程師、數(shù)據(jù)倉(cāng)庫(kù)工程師、ETL工程師、數(shù)據(jù)采集工程師、數(shù)據(jù)支持工程師、BI商業(yè)分析師、數(shù)據(jù)可視化工程師、Hadoop工程師、Spark工程師
技術(shù)點(diǎn)
Java、MySQL、Maven、Git、OpenResty、Linux、Shell、HDFS、YARN、Zookeeper、MapReduce、Scala、Python、SparkCore、Hive、SparkSQL、Presto、Sqoop、DataX、Flume、CDH、數(shù)倉(cāng)架構(gòu)、維度建模、SuperSet、Azkaban、Airflow等。掌握企業(yè)級(jí)基建環(huán)境部署、Hive和Spark數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)倉(cāng)庫(kù)搭建、數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)加載、數(shù)據(jù)應(yīng)用和京東離線ETL。
項(xiàng)目
數(shù)據(jù)服務(wù)、大數(shù)據(jù)可視化、企業(yè)級(jí)Hadoop基建項(xiàng)目部署、分布式網(wǎng)絡(luò)爬蟲(chóng)、基于Spark的大數(shù)據(jù)分析項(xiàng)目、ETL項(xiàng)目之Hive和SparkSQL、BI商業(yè)分析等。
第二階段實(shí)時(shí)倉(cāng)庫(kù)(5周)
掌握能力
掌握流數(shù)據(jù)接入、基于Flink實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)、流批一體數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)、數(shù)據(jù)湖開(kāi)發(fā)、實(shí)時(shí)ETL、實(shí)時(shí)監(jiān)控系統(tǒng)和京東實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)
勝任職位
實(shí)時(shí)工程師、Flink工程師、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)工程師、實(shí)時(shí)ETL工程師、Spark工程師
技術(shù)點(diǎn)
Kafka、Structured Streaming、Hudi、Canal、Flink、ClickHouse、HBase、Phoenix、Elasticsearch、Redis
項(xiàng)目
實(shí)時(shí)監(jiān)控系統(tǒng)、基于Flink的實(shí)時(shí)數(shù)據(jù)開(kāi)發(fā)、實(shí)時(shí)數(shù)據(jù)湖、大數(shù)據(jù)搜索系統(tǒng)
第三階段實(shí)踐項(xiàng)目(4周)
掌握能力
掌握企業(yè)項(xiàng)目開(kāi)發(fā)流程、用戶畫(huà)像開(kāi)發(fā)、企業(yè)級(jí)推薦系統(tǒng)開(kāi)發(fā)、數(shù)據(jù)治理、基于生產(chǎn)環(huán)境項(xiàng)目部署和京東項(xiàng)目性能調(diào)優(yōu)
勝任職位
數(shù)據(jù)服務(wù)工程師、離線數(shù)據(jù)倉(cāng)庫(kù)開(kāi)發(fā)工程師、BI商業(yè)分析師、實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)工程師、實(shí)時(shí)監(jiān)控系統(tǒng)工程師、ETL工程師、數(shù)據(jù)可視化工程師、數(shù)據(jù)治理工程師、高級(jí)數(shù)據(jù)開(kāi)發(fā)工程師、推薦工程、數(shù)據(jù)平臺(tái)工程師、數(shù)據(jù)架構(gòu)師
技術(shù)點(diǎn)
數(shù)據(jù)采集與監(jiān)控平臺(tái)、準(zhǔn)實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、用戶畫(huà)像、推薦系統(tǒng)、基于Flink的實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、元數(shù)據(jù)管理與數(shù)據(jù)治理。
以上是對(duì)大數(shù)據(jù)技術(shù)學(xué)什么課程相關(guān)問(wèn)題的解答,想要獲取完整學(xué)習(xí)大綱的同學(xué)可以點(diǎn)擊在線名師免費(fèi)獲取。千鋒好程序員大數(shù)據(jù)+數(shù)據(jù)智能,與京東物流大廠合作共建大數(shù)據(jù)技術(shù)領(lǐng)域的實(shí)戰(zhàn)型前瞻深度課程,對(duì)大廠熱門(mén)技術(shù)及項(xiàng)目進(jìn)行系統(tǒng)、深度的研發(fā)和建設(shè),形成獨(dú)特的教研壁壘,感興趣的同學(xué)可以來(lái)千鋒教育免費(fèi)試聽(tīng)!