國(guó)內(nèi)人才缺口
行業(yè)需求增長(zhǎng)
獵聘網(wǎng)大數(shù)據(jù)招聘
北京大數(shù)據(jù)工程師
01 大數(shù)據(jù)入門基礎(chǔ)課程 | 1.JavaSE;2.MySQL;3.JDBC;4.Linux;5.shell;6.HTML;7.CSS;8.JavaScript;9.JSP;10.Servlet |
02 大數(shù)據(jù)Hadoop基礎(chǔ) | 1.大數(shù)據(jù)概論;2.Hadoop框架;3.HDFS分布式文件系統(tǒng);4.MapReduce計(jì)算模型;5.全真實(shí)訓(xùn)項(xiàng)目 |
03 大數(shù)據(jù)離線分析 | 1.Hive數(shù)據(jù)倉(cāng)庫(kù);2.Sqoop ETL工具;3.Azkaban工作流引擎;4.Ooize;5.Impala;6.全真實(shí)訓(xùn)項(xiàng)目 |
04 大數(shù)據(jù)實(shí)時(shí)計(jì)算 | 1.Zookeeper分布式協(xié)調(diào)系統(tǒng);2.HBase分布式數(shù)據(jù)庫(kù);3.Redis數(shù)據(jù)庫(kù);4.mogDB數(shù)據(jù)庫(kù);5.Kudu列式存儲(chǔ)系統(tǒng);6.Storm實(shí)時(shí)數(shù)據(jù)處理平臺(tái);7.Kafka分布式發(fā)布訂閱消息系統(tǒng);8.Flume海量日志采集系統(tǒng);9.全真實(shí)訓(xùn)綜合項(xiàng)目 |
05 Spark數(shù)據(jù)計(jì)算 | 1.Scala;2.Spark;3RDD;4.Spark SQL;5. Streaming;6. Mahout;7.MLlib;8.GraphX;9.Spark R;10.Python;11.Alluxio;12.Python爬蟲;13.ElasticSearch;14.Lucene |
Hadoop基礎(chǔ)實(shí)戰(zhàn) |
項(xiàng)目名稱:搜狗搜索日志分析系統(tǒng) 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:Hadoop集群 12臺(tái) 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項(xiàng)目描述:搜狗每天產(chǎn)生大量的日志數(shù)據(jù),從日志數(shù)據(jù)里面能提取到有用的數(shù)據(jù)包括每個(gè)用戶的ID、瀏覽次數(shù)、月/日瀏覽頻率、訪問(wèn)源、瀏覽內(nèi)容等等,提取這些內(nèi)容、統(tǒng)計(jì)數(shù)據(jù)分析每個(gè)用戶行為,從而做出有利的決定。 |
大數(shù)據(jù)離線實(shí)戰(zhàn) |
項(xiàng)目名稱:新浪微博數(shù)據(jù)分析系統(tǒng) 日均數(shù)據(jù)體量:3GB+ 硬件環(huán)境:Hadoop集群 50臺(tái) 軟件環(huán)境:MapReduce+HBase0.98.9+Storm0.9.6+Hadoop2.5.2+Kafka2.10+Zooke eper3.4.5+CentOS-6.5-X86 項(xiàng)目描述:此次項(xiàng)目我們需要處理微博產(chǎn)生的數(shù)據(jù),通過(guò)對(duì)數(shù)據(jù)的處理得到所需的數(shù)據(jù),微博擁有大量的用戶,大量的用戶潛在的價(jià)值是巨大,怎么挖掘這些潛在的寶藏就是我們項(xiàng)目最直接的目的,為了能夠?qū)崟r(shí)的進(jìn)行數(shù)據(jù)處理使用Storm流式計(jì)算系統(tǒng),和HBase、Zookeeper、Kafka組成框架,對(duì)數(shù)據(jù)進(jìn)行處理,當(dāng)然這些都是建立在hadoop集群上實(shí)現(xiàn)的,底層的存儲(chǔ)還是HDFS。 |
大數(shù)據(jù)實(shí)時(shí)計(jì)算 |
項(xiàng)目名稱:網(wǎng)絡(luò)流量流向異常賬號(hào)統(tǒng)計(jì)項(xiàng)目 數(shù)據(jù)體量:每天1000億,每秒峰值100 000 硬件環(huán)境:Hadoop集群 600臺(tái) 軟件環(huán)境:Hadoop2.5.2+Hive1.2.1+MR+Oracle10g 項(xiàng)目描述:運(yùn)營(yíng)商骨干網(wǎng)上采集現(xiàn)網(wǎng)流量流向信息,根據(jù)這些原始信息檢測(cè)賬號(hào)是否存在異常,如果多個(gè)終端使用同一個(gè)寬帶賬號(hào),超過(guò)一定閾值則觸發(fā)報(bào)警機(jī)制,例如閾值為5時(shí),同一個(gè)賬號(hào)同時(shí)連接的終端數(shù)量不能超過(guò)該值,如果超過(guò)則報(bào)警。 |
Spark階段項(xiàng)目 |
項(xiàng)目名稱:京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計(jì)分析平臺(tái) 數(shù)據(jù)體量:5000W+/日 硬件環(huán)境:centos-6.5-x86 集群:spark standalone(Master-1,Worker-3) 軟件環(huán)境:hadoop,spark,hive,mysql,idea,navicat,kafka,flume 每日處理的數(shù)據(jù)量:3GB 項(xiàng)目描述:基于京東網(wǎng)上商城數(shù)據(jù)統(tǒng)計(jì)分析平臺(tái)--該項(xiàng)目采用了目前大數(shù)據(jù)領(lǐng)域非常流行的技術(shù)——Spark。本項(xiàng)目使用了Spark技術(shù)生態(tài)棧中最常用的三個(gè)技術(shù)框架,Spark Core、Spark SQL和Spark Streaming,進(jìn)行離線計(jì)算和實(shí)時(shí)計(jì)算業(yè)務(wù)模塊的開發(fā)。實(shí)現(xiàn)了包括:統(tǒng)計(jì)和分析UV、PV、登錄、留存、熱門商品離線統(tǒng)計(jì)、廣告流量實(shí)時(shí)統(tǒng)計(jì)3個(gè)業(yè)務(wù)模塊。 |
北航軟件工程碩士,16年軟件架構(gòu)開發(fā)經(jīng)驗(yàn),曾就職于東軟、DNS等知名企業(yè),新東方、達(dá)內(nèi)前教學(xué)總監(jiān),精通JAVAEE、JAVA框架、Oracle數(shù)據(jù)庫(kù),知名企業(yè)培訓(xùn)大咖。
原普開數(shù)據(jù)大數(shù)據(jù)架構(gòu)師兼教學(xué)總監(jiān),新奧集團(tuán)公司云數(shù)據(jù)平臺(tái)項(xiàng)目首席架構(gòu)師,京東萬(wàn)象大數(shù)據(jù)平臺(tái)締造人之一,二六三網(wǎng)絡(luò)通信反垃圾郵件系統(tǒng)平臺(tái)項(xiàng)目經(jīng)理。
中途耽誤幾天的話可以通過(guò)看視頻同步完成老師的作業(yè)彌補(bǔ)進(jìn)度,不會(huì)的可以隨時(shí)問(wèn)老師。
學(xué)生因?qū)W習(xí)中途落課或者學(xué)習(xí)效果不扎實(shí)等原因可以向教務(wù)老師申請(qǐng)重修或降級(jí),本期學(xué)不會(huì)下期免費(fèi)再學(xué),直到學(xué)會(huì)為止!
學(xué)習(xí)的流程分為預(yù)習(xí)、聽(tīng)課、整理筆記、作業(yè)(每周定期檢查作業(yè),并針對(duì)反饋情況進(jìn)行講解)、復(fù)習(xí)、默寫、項(xiàng)目階段跟蹤檢查。
預(yù)習(xí)筆記是杭州兄弟連一再?gòu)?qiáng)調(diào)的學(xué)習(xí)法寶,每個(gè)同學(xué)在杭州兄弟連都必須養(yǎng)成課前預(yù)習(xí)的習(xí)慣,對(duì)老師第二天要講授的內(nèi)容重點(diǎn)、難點(diǎn)做到心里有數(shù),聽(tīng)課事半功倍。
開課后根據(jù)學(xué)生的作業(yè)及測(cè)驗(yàn)情況形成關(guān)懷名單,進(jìn)入關(guān)懷名單的學(xué)生會(huì)被所有老師所關(guān)注,相應(yīng)的對(duì)其作業(yè)、預(yù)習(xí)筆記、默寫等要求會(huì)更高,要求會(huì)更嚴(yán)格。
學(xué)習(xí)中遇到問(wèn)題,小組成員共同討論解決,小組內(nèi)有學(xué)習(xí)懈怠完不成學(xué)習(xí)任務(wù)的同學(xué),小組內(nèi)全體成員會(huì)集體被罰(罰手抄代碼n遍喲)。
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
課程背景
杭州是全國(guó)重要的大數(shù)據(jù)中心,大數(shù)據(jù)分析技術(shù)應(yīng)用越來(lái)越廣泛,因此培訓(xùn)大數(shù)據(jù)分析人才的需求非常強(qiáng)烈。本課程旨在滿足市場(chǎng)需求,為學(xué)員提供全面的大數(shù)據(jù)分析知識(shí)和技能。
課程特色
1.專業(yè)師資團(tuán)隊(duì):由杭州頂尖企業(yè)大數(shù)據(jù)分析師授課。
2.實(shí)戰(zhàn)為主:實(shí)際案例剖析,讓學(xué)員學(xué)到真正的應(yīng)用。
3.靈活學(xué)習(xí):課程時(shí)間和地點(diǎn)靈活可調(diào),支持線下和線上學(xué)習(xí)。
4.畢業(yè)項(xiàng)目支持:畢業(yè)后可獲得實(shí)踐機(jī)會(huì),根據(jù)實(shí)踐結(jié)果為優(yōu)秀學(xué)員提供就業(yè)機(jī)會(huì)。
課程目標(biāo)
1.掌握大數(shù)據(jù)分析的基本概念和實(shí)際應(yīng)用。
2.能夠使用大數(shù)據(jù)分析工具進(jìn)行數(shù)據(jù)挖掘和分析。
3.能夠理解并解讀公司大數(shù)據(jù),為決策提供依據(jù)。
4.掌握機(jī)器學(xué)習(xí)、人工智能方面的應(yīng)用技能。
學(xué)習(xí)對(duì)象
1.有一定數(shù)學(xué)、計(jì)算機(jī)基礎(chǔ)的學(xué)生或職業(yè)人士。
2.對(duì)大數(shù)據(jù)分析感興趣的人士及從事大數(shù)據(jù)相關(guān)職業(yè)的專業(yè)人士。
課程內(nèi)容
1.大數(shù)據(jù)分析基礎(chǔ)知識(shí)
2.大數(shù)據(jù)分析工具使用技能
3.機(jī)器學(xué)習(xí)算法及應(yīng)用
4.人工智能及應(yīng)用案例
5.公司大數(shù)據(jù)分析案例剖析
學(xué)習(xí)時(shí)長(zhǎng)
本課程為400學(xué)時(shí),除去節(jié)假日,約為6個(gè)月。
收費(fèi)范圍
根據(jù)學(xué)員不同的情況收費(fèi)也有所不同,具體收費(fèi)以到校咨詢?yōu)闇?zhǔn)。
學(xué)習(xí)收獲
1.掌握大數(shù)據(jù)分析的基本概念和技能應(yīng)用。
2.了解大數(shù)據(jù)技術(shù)的前沿知識(shí)和最新進(jìn)展。
3.擁有良好的數(shù)據(jù)分析思維,為公司做出正確的決策提供支持。
4.增強(qiáng)自己的競(jìng)爭(zhēng)力,為未來(lái)職業(yè)發(fā)展打下堅(jiān)實(shí)的基礎(chǔ)。
結(jié)語(yǔ)
以上信息僅供參考,實(shí)際情況以到校咨詢?yōu)闇?zhǔn)。可聯(lián)系在線客服,預(yù)約免費(fèi)體驗(yàn)課。本課程將為您提供全面的大數(shù)據(jù)分析知識(shí)和技能,讓您從中受益匪淺。
培訓(xùn)項(xiàng)目:大數(shù)據(jù)培訓(xùn)、人工智能培訓(xùn)、數(shù)據(jù)分析培訓(xùn)、運(yùn)營(yíng)
¥16800起11208人關(guān)注
¥22800起46737人關(guān)注
¥10800起3798人關(guān)注
¥231124650人關(guān)注
¥128001819人關(guān)注
¥2700起6414人關(guān)注
¥11800起7288人關(guān)注
¥22800起67529人關(guān)注
¥20800起1194人關(guān)注
¥138001724人關(guān)注