國內(nèi)人才缺口
行業(yè)需求增長
獵聘網(wǎng)大數(shù)據(jù)招聘
北京大數(shù)據(jù)工程師
01 大數(shù)據(jù)入門基礎(chǔ)課程 | 1.JavaSE;2.MySQL;3.JDBC;4.Linux;5.shell;6.HTML;7.CSS;8.JavaScript;9.JSP;10.Servlet |
02 大數(shù)據(jù)Hadoop基礎(chǔ) | 1.大數(shù)據(jù)概論;2.Hadoop框架;3.HDFS分布式文件系統(tǒng);4.MapReduce計(jì)算模型;5.全真實(shí)訓(xùn)項(xiàng)目 |
03 大數(shù)據(jù)離線分析 | 1.Hive數(shù)據(jù)倉庫;2.Sqoop ETL工具;3.Azkaban工作流引擎;4.Ooize;5.Impala;6.全真實(shí)訓(xùn)項(xiàng)目 |
04 大數(shù)據(jù)實(shí)時(shí)計(jì)算 | 1.Zookeeper分布式協(xié)調(diào)系統(tǒng);2.HBase分布式數(shù)據(jù)庫;3.Redis數(shù)據(jù)庫;4.mogDB數(shù)據(jù)庫;5.Kudu列式存儲(chǔ)系統(tǒng);6.Storm實(shí)時(shí)數(shù)據(jù)處理平臺(tái);7.Kafka分布式發(fā)布訂閱消息系統(tǒng);8.Flume海量日志采集系統(tǒng);9.全真實(shí)訓(xùn)綜合項(xiàng)目 |
05 Spark數(shù)據(jù)計(jì)算 | 1.Scala;2.Spark;3RDD;4.Spark SQL;5. Streaming;6. Mahout;7.MLlib;8.GraphX;9.Spark R;10.Python;11.Alluxio;12.Python爬蟲;13.ElasticSearch;14.Lucene |
Hadoop基礎(chǔ)實(shí)戰(zhàn) |
項(xiàng)目名稱:搜狗搜索日志分析系統(tǒng) 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:Hadoop集群 12臺(tái) 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項(xiàng)目描述:搜狗每天產(chǎn)生大量的日志數(shù)據(jù),從日志數(shù)據(jù)里面能提取到有用的數(shù)據(jù)包括每個(gè)用戶的ID、瀏覽次數(shù)、月/日瀏覽頻率、訪問源、瀏覽內(nèi)容等等,提取這些內(nèi)容、統(tǒng)計(jì)數(shù)據(jù)分析每個(gè)用戶行為,從而做出有利的決定。 |
大數(shù)據(jù)離線實(shí)戰(zhàn) |
項(xiàng)目名稱:新浪微博數(shù)據(jù)分析系統(tǒng) 日均數(shù)據(jù)體量:3GB+ 硬件環(huán)境:Hadoop集群 50臺(tái) 軟件環(huán)境:MapReduce+HBase0.98.9+Storm0.9.6+Hadoop2.5.2+Kafka2.10+Zooke eper3.4.5+CentOS-6.5-X86 項(xiàng)目描述:此次項(xiàng)目我們需要處理微博產(chǎn)生的數(shù)據(jù),通過對數(shù)據(jù)的處理得到所需的數(shù)據(jù),微博擁有大量的用戶,大量的用戶潛在的價(jià)值是巨大,怎么挖掘這些潛在的寶藏就是我們項(xiàng)目最直接的目的,為了能夠?qū)崟r(shí)的進(jìn)行數(shù)據(jù)處理使用Storm流式計(jì)算系統(tǒng),和HBase、Zookeeper、Kafka組成框架,對數(shù)據(jù)進(jìn)行處理,當(dāng)然這些都是建立在hadoop集群上實(shí)現(xiàn)的,底層的存儲(chǔ)還是HDFS。 |
大數(shù)據(jù)實(shí)時(shí)計(jì)算 |
項(xiàng)目名稱:網(wǎng)絡(luò)流量流向異常賬號(hào)統(tǒng)計(jì)項(xiàng)目 數(shù)據(jù)體量:每天1000億,每秒峰值100 000 硬件環(huán)境:Hadoop集群 600臺(tái) 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項(xiàng)目描述:運(yùn)營商骨干網(wǎng)上采集現(xiàn)網(wǎng)流量流向信息,根據(jù)這些原始信息檢測賬號(hào)是否存在異常,如果多個(gè)終端使用同一個(gè)寬帶賬號(hào),超過一定閾值則觸發(fā)報(bào)警機(jī)制,例如閾值為5時(shí),同一個(gè)賬號(hào)同時(shí)連接的終端數(shù)量不能超過該值,如果超過則報(bào)警。 |
Spark階段項(xiàng)目 |
項(xiàng)目名稱:京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計(jì)分析平臺(tái) 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:centos-6.5-x86 集群:spark standalone(Master-1,Worker-3) 軟件環(huán)境:hadoop,spark,hive,mysql,idea,navicat,kafka,flume 每日處理的數(shù)據(jù)量:3GB 項(xiàng)目描述:基于京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計(jì)分析平臺(tái)--該項(xiàng)目采用了目前大數(shù)據(jù)領(lǐng)域非常流行的技術(shù)——Spark。本項(xiàng)目使用了Spark技術(shù)生態(tài)棧中最常用的三個(gè)技術(shù)框架,Spark Core、Spark SQL和Spark Streaming,進(jìn)行離線計(jì)算和實(shí)時(shí)計(jì)算業(yè)務(wù)模塊的開發(fā)。實(shí)現(xiàn)了包括:統(tǒng)計(jì)和分析UV、PV、登錄、留存、熱門商品離線統(tǒng)計(jì)、廣告流量實(shí)時(shí)統(tǒng)計(jì)3個(gè)業(yè)務(wù)模塊。 |
北航軟件工程碩士,16年軟件架構(gòu)開發(fā)經(jīng)驗(yàn),曾就職于東軟、DNS等知名企業(yè),新東方、達(dá)內(nèi)前教學(xué)總監(jiān),精通JAVAEE、JAVA框架、Oracle數(shù)據(jù)庫,知名企業(yè)培訓(xùn)大咖。
原普開數(shù)據(jù)大數(shù)據(jù)架構(gòu)師兼教學(xué)總監(jiān),新奧集團(tuán)公司云數(shù)據(jù)平臺(tái)項(xiàng)目首席架構(gòu)師,京東萬象大數(shù)據(jù)平臺(tái)締造人之一,二六三網(wǎng)絡(luò)通信反垃圾郵件系統(tǒng)平臺(tái)項(xiàng)目經(jīng)理。
中途耽誤幾天的話可以通過看視頻同步完成老師的作業(yè)彌補(bǔ)進(jìn)度,不會(huì)的可以隨時(shí)問老師。
學(xué)生因?qū)W習(xí)中途落課或者學(xué)習(xí)效果不扎實(shí)等原因可以向教務(wù)老師申請重修或降級(jí),本期學(xué)不會(huì)下期免費(fèi)再學(xué),直到學(xué)會(huì)為止!
學(xué)習(xí)的流程分為預(yù)習(xí)、聽課、整理筆記、作業(yè)(每周定期檢查作業(yè),并針對反饋情況進(jìn)行講解)、復(fù)習(xí)、默寫、項(xiàng)目階段跟蹤檢查。
預(yù)習(xí)筆記是北京兄弟連一再強(qiáng)調(diào)的學(xué)習(xí)法寶,每個(gè)同學(xué)在北京兄弟連都必須養(yǎng)成課前預(yù)習(xí)的習(xí)慣,對老師第二天要講授的內(nèi)容重點(diǎn)、難點(diǎn)做到心里有數(shù),聽課事半功倍。
開課后根據(jù)學(xué)生的作業(yè)及測驗(yàn)情況形成關(guān)懷名單,進(jìn)入關(guān)懷名單的學(xué)生會(huì)被所有老師所關(guān)注,相應(yīng)的對其作業(yè)、預(yù)習(xí)筆記、默寫等要求會(huì)更高,要求會(huì)更嚴(yán)格。
學(xué)習(xí)中遇到問題,小組成員共同討論解決,小組內(nèi)有學(xué)習(xí)懈怠完不成學(xué)習(xí)任務(wù)的同學(xué),小組內(nèi)全體成員會(huì)集體被罰(罰手抄代碼n遍喲)。
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
北京大數(shù)據(jù)分析培訓(xùn)
提供優(yōu)秀的數(shù)據(jù)分析教育
課程背景
隨著社會(huì)信息化的加速發(fā)展,越來越多的數(shù)據(jù)產(chǎn)生和積累,數(shù)據(jù)分析的重要性也愈發(fā)凸顯出來。北京大數(shù)據(jù)分析培訓(xùn)抓住了這一趨勢,秉承“教育,創(chuàng)造價(jià)值”的理念,致力于培養(yǎng)出具備深厚數(shù)學(xué)、統(tǒng)計(jì)功底和數(shù)據(jù)分析能力的高端數(shù)據(jù)分析人才。
課程特色
1. 全面覆蓋學(xué)員所需專業(yè)知識(shí),包括數(shù)據(jù)處理技術(shù)、數(shù)據(jù)分析技術(shù)和數(shù)據(jù)可視化技術(shù),使學(xué)員成為具備全方位能力的數(shù)據(jù)分析人才。
2. 基于實(shí)際業(yè)務(wù),將案例片段和實(shí)際場景封裝成各類數(shù)據(jù)庫,讓學(xué)員模擬真實(shí)數(shù)據(jù)分析情境,快速熟練掌握數(shù)據(jù)分析領(lǐng)域的各類技巧和應(yīng)用場景。
3. 采用小班制授課,保證每個(gè)學(xué)員都能夠得到充分細(xì)致的指導(dǎo)以及課后作業(yè)的及時(shí)批改和互動(dòng)交流。
4. 依托強(qiáng)大的師資力量,所有講師都有多年的實(shí)際項(xiàng)目經(jīng)驗(yàn)和數(shù)據(jù)分析教育背景,可以傳授最前沿的數(shù)據(jù)分析方法給學(xué)員。
5. 經(jīng)過長時(shí)間的實(shí)踐和調(diào)整,已經(jīng)成熟的培訓(xùn)體系,幫助學(xué)員更快更好地掌握全面的數(shù)據(jù)分析技能。
課程目標(biāo)
1.掌握基礎(chǔ)數(shù)據(jù)處理技術(shù),如數(shù)據(jù)清洗、數(shù)據(jù)抽樣、數(shù)據(jù)匯總等。
2.學(xué)習(xí)各種數(shù)據(jù)分析技術(shù),如回歸分析、時(shí)間序列分析、多元統(tǒng)計(jì)分析等。
3.學(xué)習(xí)數(shù)據(jù)可視化原理與應(yīng)用,了解如何制作數(shù)據(jù)分析報(bào)告。
4.掌握一定的編程能力和數(shù)據(jù)分析工具的使用技巧。
5.掌握數(shù)據(jù)分析項(xiàng)目管理技能,能夠熟練應(yīng)對各種數(shù)據(jù)分析項(xiàng)目工作。
6.提升個(gè)人數(shù)據(jù)分析能力,成為高級(jí)數(shù)據(jù)分析人才。
學(xué)習(xí)對象
1.具有上述目標(biāo)技能需求的從業(yè)人員及公司管理者。
2.具備一定IT基礎(chǔ)或相關(guān)專業(yè)背景的學(xué)生和從業(yè)人員。
3.對數(shù)據(jù)分析有濃厚興趣,想獲得一定分析技能的人員。
課程內(nèi)容
1.數(shù)據(jù)處理技術(shù)
1.1 數(shù)據(jù)清洗
1.2 數(shù)據(jù)抽樣
1.3 數(shù)據(jù)匯總
2.數(shù)據(jù)分析技術(shù)
2.1 統(tǒng)計(jì)基礎(chǔ)知識(shí)
2.2 Hadoop和MapReduce技術(shù)
2.3 機(jī)器學(xué)習(xí)算法
2.4 基礎(chǔ)挖掘技術(shù)
3.數(shù)據(jù)可視化技術(shù)
3.1 制作數(shù)據(jù)報(bào)表
3.2 制作數(shù)據(jù)可視化圖表
3.3 數(shù)據(jù)分析軟件的實(shí)踐
4.編程基礎(chǔ)和工具使用技巧
4.1 Python編程基礎(chǔ)
4.2 R編程基礎(chǔ)
4.3 SQL語言
4.4 Excel數(shù)據(jù)處理
5.項(xiàng)目管理技能
5.1 數(shù)據(jù)分析項(xiàng)目的流程
5.2 項(xiàng)目需求分析
5.3 項(xiàng)目實(shí)施和監(jiān)控
5.4 項(xiàng)目報(bào)告撰寫
學(xué)習(xí)時(shí)長、收費(fèi)范圍
學(xué)習(xí)時(shí)長為三個(gè)月,共12周,每周五天。收費(fèi)范圍為15,000-20,000元。
學(xué)習(xí)收獲
通過本課程的學(xué)習(xí),學(xué)員可以了解如何有效地處理包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)并使用這些數(shù)據(jù)在不太熟悉的領(lǐng)域中獲取應(yīng)用程序。學(xué)員可以開發(fā)基于數(shù)據(jù)的應(yīng)用程序和設(shè)計(jì)數(shù)據(jù)分析庫,并使用這些實(shí)時(shí)應(yīng)用程序?qū)?shù)據(jù)進(jìn)行處理。學(xué)員將具備數(shù)據(jù)分析思維和能力,為數(shù)據(jù)科學(xué)家培養(yǎng)打下堅(jiān)實(shí)的基礎(chǔ)。
結(jié)語
以上信息僅供參考,實(shí)際情況以到校咨詢?yōu)闇?zhǔn)。學(xué)員可聯(lián)系在線客服,預(yù)約免費(fèi)體驗(yàn)課,了解更多詳情。
培訓(xùn)項(xiàng)目:大數(shù)據(jù)分析培訓(xùn)、大數(shù)據(jù)開發(fā)培訓(xùn)、大數(shù)據(jù)算法培訓(xùn)
¥81881160人關(guān)注