怎麼樣學會用大數據

① 如何學習大數據

1.了解大數據理論
要學習大數據你至少應該知道什麼是大數據，大數據一般運用在什麼領域。對大數據有一個大概的了解，你才能清楚自己對大數據究竟是否有興趣，如果對大數據一無所知就開始學習，有可能學著學著發現自己其實不喜歡，這樣浪費了時間精力，可能還浪費了金錢。所以如果想要學習大數據，需要先對大數據有一個大概的了解。
2.計算機編程語言的學習。
對於零基礎的朋友，一開始入門可能不會太簡單。因為需要掌握一門計算機的編程語言，大家都知道計算機編程語言有很多，比如：R，C++，java等等。目前大多數機構都是教JAVA，我們都知道Java是目前使用最為廣泛的網路編程語言之一。他容易學而且很好用，如果你學習過C++語言，你會覺得C++和Java很像，因為Java中許多基本語句的語法和C++一樣，像常用的循環語句，控制語句等和C++幾乎一樣，其實Java和C++是兩種完全不同的語言，Java只需理解一些基本的概念，就可以用它編寫出適合於各種情況的應用程序。Java略去了運算符重載、多重繼承等模糊的概念，C++中許多容易混淆的概念，有的被Java棄之不用了，或者以一種更清楚更容易理解的方式實現，因此Java語言相對是簡單的。
在學習Java的時候，我們一般需要學習這些課程： HTML&CSS&JS，java的基礎，JDBC與資料庫，JSP java web技術， jQuery與AJAX技術，SpringMVC、Mybatis、Hibernate等等。這些課程都能幫助我們更好了解Java，學會運用Java。
3.大數據相關課程的學習。
學完了編程語言之後，一般就可以進行大數據部分的課程學習了。一般來說，學習大數據部分的時間比學習Java的時間要短。大數據課程，包括大數據技術入門，海量數據高級分析語言，海量數據存儲分布式存儲，以及海量數據分析分布式計算等部分，Linux，Hadoop，Scala, HBase, Hive, Spark等等專業課程。如果要完整的學習大數據的話，這些課程都是必不可少的。
4.實戰階段。
不用多說，學習完任何一門技術，最後的實戰訓練是最重要的，進行一些實際項目的操作練手，可以幫助我們更好的理解所學的內容，同時對於相關知識也能加強記憶，在今後的運用中，也可以更快的上手，對於相關知識該怎麼用也有了經驗。科多大數據擁有大量實際的大數據項目的，在大數據課程學習的過程中，老師會穿插很多相關項目進行教學，學員也可以學到任課老師的一些經驗和技巧。

② 作為個人怎麼學習和利用大數據

1/10
【了解自身學習大數據的目的】每個人都有自己的想法，學習大數據的目的是什麼，是學會分析，還是學會管理呢。
2/10
【制定學習大數據的計劃】，在學習的過程中，沒有計劃，估計是達不到理想的彼岸的。一個好的計劃是詳細合理的，是張弛有度的。
3/10
【三人必有我師】向他人學習，在現代社會里，大數據的思維，每個人都會擁有，只有不斷向他人學習，才能更好的提高之間，多問為什麼，根究5個w原則去做吧。
4/10
【互聯網很強大】利用網路資源去學習，網路時代，各種網路視頻教學平台都有資料、信息，只有跟上時代節奏，才不會落伍。
5/10
【樂於操作、沉得下來】如果你學習大數據沉不下來，建議你別學，因為這需要很大的耐心，去處理、分析、解決大量的數據，需要不斷去思考，沉得下來，才能進步。
6/10
【學好數學及建模】數學來源於生活，數據也是來源於生活，計算機以邏輯說話，數學乃邏輯的先祖，學好數學，懂得原理，學會建立相關模型是非常有必要的。
查看剩餘1張圖
7/10
【學會計算機編程】學好大數據，沒有點兒編程基礎怎能行呢，如計算機基礎，數據結構，網路基礎，資料庫等等知識。
8/10
【學習Python R SAS 等軟體及演算法】大數據時代，需要的不只是網路架構、數據倉的管理維護，最終是需要進行編程與分析的分析，而python 和R SAS 是這方面的先鋒者，需要追隨他們哦。
查看剩餘1張圖
9/10
【學會編輯論文】因為大數據需要的不是一堆數字，而是用文章表述出來，編輯好的論文勝過好的數據結果。

③ 大數據怎麼學，自學可以學會嗎

零基礎學習大數據可以有以下幾個步驟：

1、選擇一個具體方向

大數據已經初步形成版了一個產權業鏈，在數據採集、數據存儲、數據安全、數據分析、數據呈現、數據應用等有大量的崗位，不同的崗位需要具備不同的知識結構，所以首先要選擇一個適合自己的方向。

2、學習編程等基礎知識

大數據的基礎知識是數學、統計學和計算機，可以從編程語言開始學起，Python、Java、Scala、R、Go等語言在大數據領域都有一定的應用場景，可以選擇一門學習。大數據開發方向建議選擇Java、Scala，數據分析方向建議學習Python、R。

3、學習大數據平台知識

入門學習Hadoop或者Spark，Hadoop平台經過多年的發展已經形成了較為完成的應用生態，相關的成熟案例也比較多，產品插件也越來越豐富。

④ 怎麼自學大數據

自學大數據學習路線：（前提：以Java語言為基礎）

總共分為四個模塊：

• 大數據基礎

• 大數據框架

• 大數據項目

• 其他

第一模塊：大數據基礎

• Java基礎：集合，IO流

• JVM：重點是項目調優

• 多線程：理論和項目應用

• Linux：最基本的操作

這一個模塊的重點是為了面試做准備，個人根據自己的情況去復習，復習的時候理論部分建議看書和博客資料，應用部分建議看視頻和Demo調試。

下面分別去詳細的介紹一下：

• Java基礎：集合，IO流

主要是理論部分，可以看書或者博客總結，這一塊沒什麼推薦的，網上很多資料可以找到。

• JVM：重點是項目調優

• 多線程：理論和項目應用

這兩塊重點要結合到項目中，通過項目中的實際使用，然後反饋到對應的理論基礎，這一塊建議在B站上看對應的視頻。B站」尚矽谷「官網上的視頻很詳細。

• Linux：最基本的操作

這一塊有時間，先把《鳥哥的Linux私房菜》這本書看一遍，然後裝個Linux系統自己玩玩，對應的最常使用的命令自己敲敲。

如果沒時間，就把最常用的命令自己敲敲，網上有對應的總結，自己很容易搜到。一定要自己敲敲。

第二模塊：大數據框架

Hadoop：重點學，畢竟大數據是以Hadoop起家的，裡面就HDFS，MapReces，YARN三個模塊。

Hive：先學會怎麼用，當作一個工具來學習。

Spark：重點學，用來替代Hadoop的MapReces的，裡面重點有三塊：Spark Core，Spark SQL，Spark Streaming。

Flink：我還沒學。

Hbase：當作一個工具來學習，先學習怎麼用。

Kafka：先學怎麼用，其實裡面的模塊可以先理解成兩部分：生產者和消費者。所有的核心都是圍繞這兩個展開的。

Flume：當作一個工具來學習，先學習怎麼用。

Sqoop：當作一個工具來學習，先學習怎麼用。

Azkaban：當作一個工具來學習，先學習怎麼用。

Scala：這個是一門編程語句，基於Java 而來的，可以工作後在學習。

Zookeeper：當作一個工具來學習，先學習怎麼用。

以上的學習視頻和資料可以在B站的」尚矽谷「和」若澤大數據「里找到，很詳細。資料目前最詳細的資料就是各個框架對應的官網。視頻里也是對著官網一步一步講的。官網都是英文的，可以用Google瀏覽器的翻譯插件，翻譯成中文後在看。

第三模塊：大數據項目

B站的」尚矽谷「和」若澤大數據「。

第四模塊：其他

分布式：知道最基本的概念，有個分布式項目的經驗。分布式項目可以在B站的」尚矽谷「里找到。

演算法：網上有詳細的總結，書：推薦《劍指Offer》和《演算法4》，看演算法的目的是先掌握實現演算法的思路然後才是實現方式。

SQL：主要是調優，網上有很詳細的總結。

除此之外：Storm框架不要學了。

很多准備前期都是為了面試，例如：JVM和多線程，SQL調優和演算法。這些東西真正使用的過程中千差萬別，但核心知識不變，所以面試的時候總是會問，這一塊的前期以通過面試為主要點。

學習了差不多了，例如：Hadoop，Hive 和Spark學完了，就去面試面試，通過面試的情況在來調整自己的學習。

⑤ 大數據初學者應該怎麼學

記住學到這里可以作為你學大數據的一個節點。

Zookeeper：這是個萬金油，安裝Hadoop的HA的時候就會用到它，以後的Hbase也會用到它。它一般用來存放一些相互協作的信息，這些信息比較小一般不會超過1M，都是使用它的軟體對它有依賴，對於我們個人來講只需要把它安裝正確，讓它正常的run起來就可以了。

Mysql：我們學習完大數據的處理了，接下來學習學習小數據的處理工具mysql資料庫，因為一會裝hive的時候要用到，mysql需要掌握到什麼層度那?你能在Linux上把它安裝好，運行起來，會配置簡單的許可權，修改root的密碼，創建資料庫。這里主要的是學習SQL的語法，因為hive的語法和這個非常相似。

Sqoop：這個是用於把Mysql里的數據導入到Hadoop里的。當然你也可以不用這個，直接把Mysql數據表導出成文件再放到HDFS上也是一樣的，當然生產環境中使用要注意Mysql的壓力。

Hive：這個東西對於會SQL語法的來說就是神器，它能讓你處理大數據變的很簡單，不會再費勁的編寫MapRece程序。有的人說Pig那?它和Pig差不多掌握一個就可以了。

Oozie：既然學會Hive了，我相信你一定需要這個東西，它可以幫你管理你的Hive或者MapRece、Spark腳本，還能檢查你的程序是否執行正確，出錯了給你發報警並能幫你重試程序，最重要的是還能幫你配置任務的依賴關系。我相信你一定會喜歡上它的，不然你看著那一大堆腳本，和密密麻麻的crond是不是有種想屎的感覺。

Hbase：這是Hadoop生態體系中的NOSQL資料庫，他的數據是按照key和value的形式存儲的並且key是唯一的，所以它能用來做數據的排重，它與MYSQL相比能存儲的數據量大很多。所以他常被用於大數據處理完成之後的存儲目的地。

Kafka：這是個比較好用的隊列工具，隊列是干嗎的?排隊買票你知道不?數據多了同樣也需要排隊處理，這樣與你協作的其它同學不會叫起來，你干嗎給我這么多的數據(比如好幾百G的文件)我怎麼處理得過來，你別怪他因為他不是搞大數據的，你可以跟他講我把數據放在隊列里你使用的時候一個個拿，這樣他就不在抱怨了馬上灰流流的去優化他的程序去了，因為處理不過來就是他的事情。而不是你給的問題。當然我們也可以利用這個工具來做線上實時數據的入庫或入HDFS，這時你可以與一個叫Flume的工具配合使用，它是專門用來提供對數據進行簡單處理，並寫到各種數據接受方(比如Kafka)的。

Spark：它是用來彌補基於MapRece處理數據速度上的缺點，它的特點是把數據裝載到內存中計算而不是去讀慢的要死進化還特別慢的硬碟。特別適合做迭代運算，所以演算法流們特別稀飯它。它是用scala編寫的。Java語言或者Scala都可以操作它，因為它們都是用JVM的。

⑥ 怎樣進行大數據的入門級學習

怎樣進行大數據的入門級學習？

文 | 郭小賢

數據科學並沒有一個獨立的學科體系，統計學，機器學習，數據挖掘，資料庫，分布式計算，雲計算，信息可視化等技術或方法來對付數據。

但從狹義上來看，我認為數據科學就是解決三個問題：

1. datapre-processing；(數據預處理）

2. datainterpretation；（數據解讀）

3.datamodeling and analysis.（數據建模與分析）

這也就是我們做數據工作的三個大步驟：

1、原始數據要經過一連串收集、提取、清洗、整理等等的預處理過程，才能形成高質量的數據；

2、我們想看看數據「長什麼樣」，有什麼特點和規律；

3、按照自己的需要，比如要對數據貼標簽分類，或者預測，或者想要從大量復雜的數據中提取有價值的且不易發現的信息，都要對數據建模，得到output。

這三個步驟未必嚴謹，每個大步驟下面可能依問題的不同也會有不同的小步驟，但按我這幾年的經驗來看，按照這個大思路走，數據一般不會做跑偏。

這樣看來，數據科學其實就是門復合型的技術，既然是技術就從編程語言談起吧，為了簡練，只說說R和Python。但既然是薦數據科學方面的書，我這里就不提R/Python編程基礎之類的書了，直接上跟數據科學相關的。

R programming

如果只是想初步了解一下R語言已經R在數據分析方面的應用，那不妨就看看這兩本：

R inaction：我的R語言大數據101。其實對於一個沒有任何編程基礎的人來說，一開始就學這本書，學習曲線可能會比較陡峭。但如果配合上一些輔助材料，如官方發布的R basics（http：//cran.r-project.org/doc/contrib/usingR.pdf），stackoverflow上有tag-R的問題集（Newest 『r』 Questions），遇到復雜的問題可在上面搜索，總會找到解決方案的。這樣一來，用這本書拿來入門學習也問題不大。而且這本書作者寫得也比較輕松，緊貼實戰。

Dataanalysis and graphics using R：使用R語言做數據分析的入門書。這本書的特點也是緊貼實戰，沒有過多地講解統計學理論，所以喜歡通過情境應用來學習的人應該會喜歡這本入門書。而且這本書可讀性比較強，也就是說哪怕你手頭沒電腦寫不了代碼，有事沒事拿出這本書翻一翻，也能讀得進去。

但如果你先用R來從事實實在在的數據工作，那麼上面兩本恐怕不夠，還需要這些：

Modernapplied statistics with S：這本書里統計學的理論就講得比較多了，好處就是你可以用一本書既復習了統計學，又學了R語言。（S/Splus和R的關系就類似於Unix和Linux，所以用S教程學習R，一點問題都沒有）

Datamanipulation with R：這本書實務性很強，它教給你怎麼從不同格式的原始數據文件里讀取、清洗、轉換、整合成高質量的數據。當然和任何一本注重實戰的書一樣，本書也有豐富的真實數據或模擬數據供你練習。對於真正從事數據處理工作的人來說，這本書的內容非常重要，因為對於任何研究，一項熟練的數據預處理技能可以幫你節省大量的時間和精力。否則，你的研究總是要等待你的數據。

RGraphics Cookbook：想用R做可視化，就用這本書吧。150多個recipes，足以幫你應付絕大多數類型的數據。以我現在極業余的可視化操作水平來看，R是最容易做出最漂亮的圖表的工具了。

Anintroction to statistical learning with application in R：這本書算是著名的the element of statistical learning的姊妹篇，後者更注重統計（機器）學習的模型和演算法，而前者所涉及的模型和演算法原沒有後者全面或深入，但卻是用R來學習和應用機器學習的很好的入口。

Ahandbook of statistical analysis using R：這本書內容同樣非常扎實，很多統計學的學生就是用這本書來學慣用R來進行統計建模的。

Python

Think Python，ThinkStats，Think Bayes：這是AllenB. Downey寫的著名的Think X series三大卷。其實是三本精緻的小冊子，如果想快速地掌握Python在統計方面的操作，好好閱讀這三本書，認真做習題，答案鏈接在書里有。這三本書學通了，就可以上手用Python進行基本的統計建模了。

PythonFor Data Analysis： 作者是pandas的主要開發者，也正是Pandas使Python能夠像R一樣擁有dataframe的功能，能夠處理結構比較復雜的數據。這本書其實analysis講得不多，說成數據處理應該更合適。掌握了這本書，處理各種糟心的數據就問題不大了。

Introctionto Python for Econometrics， Statistics and DataAnalysis：這本書第一章就告訴你要安裝Numpy， Scipy， Matplotlib， Pandas， IPython等等。然後接下來的十好幾章就是逐一介紹這幾個庫該怎麼用。很全面，但讀起來比較枯燥，可以用來當工具書。

PracticalData Analysis： 這本書挺奇葩，貌似很暢銷，但作者把內容安排得東一榔頭西一棒子，什麼都講一點，但一個都沒講透。這本書可以作為我們學習數據分析的一個索引，看到哪塊內容有意思，就順著它這個藤去摸更多的瓜。

PythonData Visualization Cookbook： 用Python做可視化的教材肯定不少，我看過的也就這一本，覺得還不錯。其實這類書差別都不會很大，咬住一本啃下來就是王道。

Exploratory Data Analysis 和 Data Visualization

Exploratory DataAnalysis：John Tukey寫於1977年的經典老教材，是這一領域的開山之作。如今EDA已經是統計學里的重要一支，但當時還是有很多人對他的工作不屑一顧。可他愛數據，堅信數據可以以一種出人意料的方式呈現出來。正是他的努力，讓數據可視化成為一門無比迷人的技術。但這本書不推薦閱讀了，內容略過時。要想完整地了解EDA，推薦下一本：

ExploratoryData Analysis with MATLAB：這本書雖然標題帶了個MATLAB，但實際上內容幾乎沒怎麼講MATLAB，只是每講一個方法的時候就列出對應的MATALB函數。這本書的重要之處在於，這是我讀過的講EDA最系統的一本書，除了對visualization有不輸於John Tucky的講解外，對於高維的數據集，通過怎樣的方法才能讓我們從中找到潛在的pattern，這本書也做了詳盡的講解。全書所以案例都有對應的MATALB代碼，而且還提供了GUI（圖形用戶界面）。所以這本書學起來還是相當輕松愉悅的。

VisualizeThis：中譯本叫「鮮活的數據」，作者是個「超級數據迷」，建立了一個叫http：//flowingdata.com的網頁展示他的數據可視化作品，這本書告訴你該選擇什麼樣的可視化工具，然後告訴你怎樣visualize關系型數據、時間序列、空間數據等，最後你就可以用數據講故事了。如果你只想感受一下數據可視化是個什麼，可以直接點開下面這個鏈接感受下吧！A tour through the visualization zoo（A TourThrough the Visualization Zoo）

Machine Learning & Data Mining

這一塊就不多說了，不是因為它不重要，而是因為它太太太重要。所以這一部分就推兩本書，都是」世界名著「，都比較難讀，需要一點點地啃。這兩本書拿下，基本就算是登堂入室了。其實作為機器學習的延伸和深化，概率圖模型（PGM）和深度學習（deep learning）同樣值得研究，特別是後者現在簡直火得不得了。但PGM偏難，啃K.Daphne那本大作實在太燒腦，也沒必要，而且在數據領域的應用也不算很廣。deep learning目前工業界的步子邁得比學術界的大，各個domain的應用如火如荼，但要有公認的好教材問世則還需時日，所以PGM和deep learning這兩塊就不薦書了。

TheElement of Statistical Learning：要學機器學習，如果讓我只推薦一本書，我就推薦這本巨著。Hastie、Tibshirani、Friedman這三位大牛寫書寫得太用心了，大廈建得夠高夠大，結構也非常嚴謹，而且很有前瞻性，納入了很多前沿的內容，而不僅僅是一部綜述性的教材。（圖表也做得非常漂亮，應該是用R語言的ggplot2做的。）這本書注重講解模型和演算法本身，所以需要具備比較扎實的數理基礎，啃起這本書來才不會太吃力。事實上掌握模型和演算法的原理非常重要。機器學習（統計學習）的庫現在已經非常豐富，即使你沒有完全搞懂某個模型或演算法的原理和過程，只要會用那幾個庫，機器學習也能做得下去。但你會發現你把數據代進去，效果永遠都不好。但是，當你透徹地理解了模型和演算法本身，你再調用那幾個庫的時候，心情是完全不一樣的，效果也不一樣。

DataMining： Concepts and Techniques， by Jiawei Han and Micheline Kamber 數據挖掘的教材汗牛充棟，之所以推薦這本韓家煒爺爺的，是因為雖然他這本書的出發點是應用，但原理上的內容也一點沒有落下，內容非常完整。而且緊跟時代，更新的很快，我看過的是第二版，就已經加進去了social network analysis這種當時的前沿內容。現在已經有第三版了，我還沒看過，但應該也加入了不少新內容。其實這本書並不難讀，只是篇幅較長，啃起來比較耗時。

其實這兩本書里單拎出來一塊內容可能又是幾本書的節奏，比如bayesian方法，再拿出兩三本書來講也不為過，我個人用到的比較多，而且也確實有不少好書。但並非是所有data scientist都要用到，所以這一塊就不再細說。

還有一些印象比較深刻的書：

Big DataGlossary： 主要講解大數據處理技術及工具，內容涵蓋了NoSQL，MapRece，Storage，Servers，NLP庫與工具包，機器學習工具包，數據可視化工具包，數據清洗，序列化指南等等。總之，是一本辭典式的大數據入門指導。

Mining ofMassive Datasets：這本書是斯坦福大學Web Mining的講義，裡面很多內容與韓家煒的Data Mining那本書重合，但這本書里詳細地講了MapRece的設計原理，PageRank（Google創業時期的核心排序演算法，現在也在不斷優化更新）講解得也比較詳細。

DevelopingAnalytic Talent： 作者是個從事了十幾年數據工作的geek，技術博客寫得很有個人風格，寫的內容都比較偏門，通常只有具備相關數據處理經驗的人能體會出來，絲毫不照顧初學者的感受。比如他會談到當數據流更新太快時該怎麼辦，或者MapRece在什麼時候不好用的問題，才不管你懂不懂相關基礎原理。所以這本書不太適合初學者閱讀。這本書其實是作者的博客文章的集結，用how to become a data scientist的邏輯把他近幾年的博客文章串聯了起來。

Past， Present and Future of Statistical Science：這本書是由COPSS（統計學社主席委員會，由國際各大統計學會的帶頭人組成）在50周年出版的一本紀念冊，裡面有50位統計學家每人分別貢獻出的一兩篇文章，有的回憶了自己當年如何走上統計學這條路，有的探討了一些統計學的根本問題，有的談了談自己在從事的前沿研究，有的則給年輕一代寫下了寄語。非常有愛的一本書。

其它資料

Harvard Data Science：這是H大的Data science在線課，我沒有修過，但口碑很好。這門課需要費用8千刀左右，比起華盛頓大學的4千刀的Data science在線課雖貴一倍，但比斯坦福的14千刀要便宜將近一半（而且斯坦福的更偏計算機）。如果想自學，早有好心人分享了slides：（https：//drive.google.com/folderview？id=0BxYkKyLxfsNVd0xicUVDS1dIS0k&usp=sharing）和homeworks and solutions： （https：//github.com/cs109/content）

PyData：PyData是來自各個domain的用Python做數據的人每年舉行一次的聚會，期間會有各路牛人舉行一些規模不大的seminar或workshop，有好心人已經把video上傳到github，有興趣的去認領吧（DataTau/datascience-anthology-pydata · GitHub）

工具

R/Python/MATLAB（必備）：如果是做數據分析和模型開發，以我的觀察來看，使用這三種工具的最多。R生來就是一個統計學家開發的軟體，所做的事也自然圍繞統計學展開。MATLAB雖然算不上是個專業的數據分析工具，但因為很多人不是專業做數據的，做數據還是為了自己的domain expertise（特別是科學計算、信號處理等），而MATLAB又是個強大無比的Domain expertise工具，所以很多人也就順帶讓MATLAB也承擔了數據處理的工作，雖然它有時候顯得效率不高。Python雖然不是做數據分析的專業軟體，但作為一個面向對象的高級動態語言，其開源的生態使Python擁有無比豐富的庫，Numpy， Scipy 實現了矩陣運算/科學計算，相當於實現了MATLAB的功能，Pandas又使Python能夠像R一樣處理dataframe，scikit-learn又實現了機器學習。

SQL（必備）：雖然現在人們都說傳統的關系型資料庫如Oracle、MySQL越來越無法適應大數據的發展，但對於很多人來說，他們每天都有處理數據的需要，但可能一輩子都沒機會接觸TB級的數據。不管怎麼說，不論是用關系型還是非關系型資料庫，SQL語言是必須要掌握的技能，用什麼資料庫視具體情況而定。

MongoDB（可選）：目前最受歡迎的非關系型資料庫NoSQL之一，不少人認為MongoDB完全可以取代mySQL。確實MongoDB方便易用，擴展性強，Web2.0時代的必需品。

Hadoop/Spark/Storm（可選）： MapRece是當前最著名也是運用最廣泛的分布式計算框架，由Google建立。Hadoop/Spark/storm都是基於MapRece的框架建立起來的分布式計算系統，要說他們之間的區別就是，Hadoop用硬碟存儲數據，Spark用內存存儲數據，Storm只接受實時數據流而不存儲數據。一言以蔽之，如果數據是離線的，如果數據比較復雜且對處理速度要求一般，就Hadoop，如果要速度，就Spark，如果數據是在線的實時的流數據，就Storm。

OpenRefine（可選）：Google開發的一個易於操作的數據清洗工具，可以實現一些基本的清洗功能。

Tableau（可選）：一個可交互的數據可視化工具，操作簡單，開箱即用。而且圖表都設計得非常漂亮。專業版1999美刀，終身使用。媒體和公關方面用得比較多。

Gephi（可選）：跟Tableau類似，都是那種可交互的可視化工具，不需要編程基礎，生成的圖表在美學和設計上也是花了心血的。更擅長復雜網路的可視化。

來自知乎

以上是小編為大家分享的關於怎樣進行大數據的入門級學習？的相關內容，更多信息可以關注環球青藤分享更多干貨

⑦ 如何學會利用大數據

1、獲取全網用戶數據

僅有企業數據，即使規模再大，也只是孤島數據。還要互聯網數據統合，才能准確掌握用戶站內站外的全方位的行為，使得數據在營銷中體現應有的價值。在數據採集階段，建議在搜集自身各方面數據形成DMP數據平台後，還要與第三方公用DMP數據對接，獲取更多的目標人群數據，形成基於全網的數據管理系統。

2、讓數據看的懂

採集來的原始數據難以讀懂，因此還需要進行集中化、結構化、標准化處理，讓“天書”轉變為看得懂的信息。

3、分析用戶特徵及偏好

將第方標簽與第三方那個標簽相結合，按不同的評估唯獨和模型演算法，通過聚類方式將具有相同特徵的用戶化成不同屬性的用戶族群，對用戶的靜態信息、動態信心、實時信息分別描述，形成網站用戶分群畫像系統。

4、制定渠道和創意策略

根據目標群體的特徵和分析結果，在計劃實施前，對投放策略進行評估和優化。如宣和更適合的用戶群體，匹配適當的媒體，制定性價比及效率更好的渠道組合，根據用戶特徵制定內容策略，從而提升用戶人群的轉化率。

⑧ 怎樣進行大數據的入門級學習

一、整體了解數據分析——5小時x0dx0a新人們被」大數據「、」人工智慧「、」21世紀是數據分析師的時代「等等信息吸引過來，立志成為一名數據分析師，於是問題來了，數據分析到底是干什麼的?數據分析都包含什麼內容?x0dx0a市面上有很多講數據分析內容的書籍，在此我推薦《深入淺出數據分析》，此書對有基礎人士可稱消遣讀物， 但對新人們還是有一定的作用。閱讀時可不求甚解，重點了解數據分析的流程、應用場景、以及書中提到的若干數據分析工具，無需糾結分析模型的實現。5個小時，足夠你對數據分析工作建立初步的印象，消除陌生感。x0dx0a二、了解統計學知識——10小時x0dx0a15個小時只夠你了解一下統計學知識，作為入門足夠，但你要知道，今後隨著工作內容的深入，需要學習更多的統計知識。x0dx0a本階段推薦書籍有二：《深入淺出統計學》《統計學：從數據到結論》，要了解常用數理統計模型(描述統計指標、聚類、決策樹、貝葉斯分類、回歸等)，重點放在學習模型的工作原理、輸入內容和輸出內容，至於具體的數學推導，學不會可暫放一邊，需要用的時候再回來看。x0dx0a三、學習初級工具——20小時x0dx0a對於非技術類數據分析人員，初級工具只推薦一個：EXCEL。推薦書籍為《誰說菜鳥不會數據分析》，基礎篇必須學習，提高篇不一定學(可用其他EXCEL進階書籍)，也可以學習網上的各種公開課。x0dx0a本階段重點要學習的是EXCEL中級功能使用(數據透視表，函數，各類圖表適用場景及如何製作)，如有餘力可學習VBA。x0dx0a四、提升PPT能力——10小時x0dx0a作為數據分析人員，PPT製作能力是極其重要的一項能力，因此需要花一點時間來了解如何做重點突出，信息明確的PPT，以及如何把各類圖表插入到PPT中而又便於更新數據。10個小時並不算多，但已經足夠(你從來沒做過PPT的話，需要再增加一些時間)。具體書籍和課程就不推薦了，網上一抓一大把，請自行搜索。x0dx0a五、了解資料庫和編程語言——10小時x0dx0a這個階段有兩個目標：學習基礎的資料庫和編程知識以提升你將來的工作效率，以及測試一下你適合學習哪一種高級數據分析工具。對於前者，資料庫建議學MySQL(雖然Hadoop很有用但你不是技術職位，初期用不到)，編程語言建議學Python(繼續安利《深入淺出Python》，我真沒收他們錢??)。資料庫學到聯合查詢就好，性能優化、備份那些內容用不到;Python則是能學多少學多少。x0dx0a六、學習高級工具——10小時x0dx0a雖然EXCEL可以解決70%以上的問題，但剩下30%還是需要高級工具來做(不信用EXCEL做個聚類)。高級分析工具有兩個選擇：SPSS和R。雖然R有各種各樣的好處，但我給的建議是根據你在上一步中的學習感覺來定學哪一個工具，要是學編程語言學的很痛苦，就學SPSS，要是學的很快樂，就學R。不管用哪一種工具，都要把你學統計學時候學會的重點模型跑一遍，學會建立模型和小幅優化模型即可。x0dx0a七、了解你想去的行業和職位——10+小時x0dx0a這里我在時間上寫了個」+「號，因為這一步並不一定要用整塊時間來學習，它是貫穿在你整個學習過程中的。數據分析師最需要不斷提升的能力就是行業和業務知識，沒有之一。你將來想投入哪個行業和哪個職位的方向，就要去學習相關的知識(比如你想做網站運營，那就要了解互聯網背景知識、網站運營指標體系、用戶運營知識等內容)。x0dx0a八、做個報告——25小時x0dx0a你學習了那麼多內容，但現在出去的話你還是找不到好工作。所有的招聘人員都會問你一句話：你做過哪些實際項目?(即使你是應屆生也一樣) 如果你有相關的項目經驗或者實習經驗，當然可以拿出來，但是如果沒有，怎麼辦?答案很簡單，做個報告給他們看，告訴招聘者：我已經有了數據分析入門級(甚至進階級)職位的能力。同時，做報告也會是你將來工作的主要內容，因此也有可能出現另外一種情況：你費盡心血做了一個報告，然後發現這不是你想要的生活，決定去干別的工作了??這也是件好事，有數據分析能力的人做其他工作也算有一項優勢。