Spark安裝
重要聲明:馬克-to-win @ 馬克java社區: 既然我們的名字叫最最最入門,這個講義的特點就在于成本最低的,讓你最快速的,最容易的入門。大數據的最大的難點在于入門入不了,從而最終放棄。俗話說師傅領進門,修行在個人。只要入了門了,后面的事都好辦。當然,既然側重點在于如何入門,內容選的就不是很多。那些已經入門的,或者想學到精通級別的同學,請千萬不要選我這套講義,選課前,務必注意本章的學習目標和內容。想學更多,注意后邊的課程。
Windows32或64位下載安裝配置Spark
1)下載地址:http://spark.apache.org/downloads.html
馬克- to-win:馬克 java社區:防盜版實名手機尾號: 73203。
馬克-to-win @ 馬克java社區:選擇需要下載的Spark版本(購買完整教程)
2)配置:
馬克-to-win @ 馬克java社區:解壓(購買完整教程)
3)啟動測試:
a)啟動Hadoop
b)在cmd窗口運行spark-shell,出現下圖代表OK。
c)因為我的hadoop 的根目錄下有一個README.txt文件,
所以測試一下word count,在命令行輸入sc.textFile("hdfs://localhost:9000/README.txt").count()查看執行結果,出現如下圖代表計算word count成功。
4)訪問http://192.168.1.104:4040/jobs/