資料介紹
如何快速搭建Hadoop運行環(huán)境
Hadoop 是一個分布式系統(tǒng)基礎(chǔ)架構(gòu),在大數(shù)據(jù)領(lǐng)域被廣泛的使用,它將大數(shù)據(jù)處理引擎盡可能的靠近存儲,Hadoop 最核心的設(shè)計就是 HDFS 和 MapReduce,HDFS 為海量的數(shù)據(jù)提供了存儲,MapReduce 為海量的數(shù)據(jù)提供了計算。這篇文章主要就是介紹一下如何搭建一個 Hadoop 運行環(huán)境。
我們使用 Linux 操作系統(tǒng)來搭建環(huán)境,下面的信息是用來準備搭建 Hadoop 環(huán)境的電腦環(huán)境信息。
1. hadoop@ubuntu:~$ cat /etc/os-release
2. NAME=“Ubuntu”
3. VERSION=“14.04.5 LTS, Trusty Tahr”
4. ID=ubuntu
5. ID_LIKE=debian
6. PRETTY_NAME=“Ubuntu 14.04.5 LTS”
7. VERSION_ID=“14.04”
8. HOME_URL=“http://www.ubuntu.com/”
9. SUPPORT_URL=“http://help.ubuntu.com/”
10. BUG_REPORT_URL=“http://bugs.launchpad.net/ubuntu/”
緊接著來新建一個用戶,這一步其實也可以省略的,可以根據(jù)實際情況來決定,這里是新建了一個叫 hadoop 的新用戶。
1. #創(chuàng)建新用戶
2. sudo useradd -m hadoop -s /bin/bash
3. #設(shè)置密碼
4. sudo passwd hadoop
5. #為hadoop用戶增加管理員權(quán)限
6. sudo adduser hadoop sudo
7. #切換到hadoop用戶
8. su hadoop
我們首先來設(shè)置一下 SSH 無密碼登錄,這一步建議都設(shè)置一下,因為分布式系統(tǒng)環(huán)境都是由多臺浪潮服務(wù)器構(gòu)成的,設(shè)置免密碼登錄會方便使用。
1. #先檢查下是否可以在沒有密碼的情況下ssh到localhost
2. ssh localhost
3. #如果在沒有密碼的情況下無法ssh到localhost,請執(zhí)行以下命令
4. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
5. cat ~/.ssh/id_rsa.pub 》》 ~/.ssh/authorized_keys
6. chmod 0600 ~/.ssh/authorized_keys
- 3568編譯環(huán)境搭建
- Apache2.2.x+PHP5.3.x+MySQL5.1.x-搭建WMAP運行環(huán)境
- 基于BGP MPLS的以太網(wǎng)VPN環(huán)境搭建源碼 16次下載
- 如何搭建移動物聯(lián)網(wǎng)Android的開發(fā)環(huán)境 1次下載
- 如何在Linux環(huán)境下實現(xiàn)Python環(huán)境的搭建 14次下載
- 如何才能在Linux系統(tǒng)下搭建51單片機的開發(fā)燒寫環(huán)境
- 在Proteus環(huán)境下搭建生產(chǎn)運行參數(shù)的多路信號監(jiān)測系統(tǒng)的詳細資料說明 4次下載
- 怎么樣才能使用proteus進行仿真?
- 如何在Linux環(huán)境下搭建51單片機的開發(fā)燒寫環(huán)境
- 如何在Mac下搭建PHP開發(fā)環(huán)境 14次下載
- redhat搭建PHP運行環(huán)境LAMP的詳細資料說明 6次下載
- 如何使用PHPStudy和APMServ快速搭建PHP 7次下載
- 基于Hadoop與聚類分析的網(wǎng)絡(luò)日志分析模型 0次下載
- hadoop大數(shù)據(jù)windows搭建環(huán)境 4次下載
- Hadoop環(huán)境的搭建與管理--謝志明 0次下載
- 如何搭建Python編程環(huán)境 4945次閱讀
- 為MindSDK搭建armgcc編譯環(huán)境(Windows版) 1104次閱讀
- HPM6750開發(fā)環(huán)境搭建及快速上手 3487次閱讀
- OpenHarmony開發(fā)環(huán)境搭建方法 2262次閱讀
- 如何搭建鴻蒙開發(fā)環(huán)境 3545次閱讀
- 虛擬機:Hadoop集群的搭建 3097次閱讀
- 什么是Hadoop? Spark和Hadoop對比 6751次閱讀
- php開發(fā)環(huán)境的搭建和使用 3330次閱讀
- 搭建測試環(huán)境常用linux命令_linux下web測試環(huán)境的搭建 1.1w次閱讀
- 測試環(huán)境的搭建和維護_軟硬件測試環(huán)境 6661次閱讀
- 如何搭建hadoop平臺_hadoop平臺搭建步驟 9042次閱讀
- hadoop基礎(chǔ)知識介紹_hadoop是什么語言開發(fā)的_hadoop能做什么 3.9w次閱讀
- hadoop技術(shù)原理總結(jié) 4140次閱讀
- hadoop開發(fā)環(huán)境搭建 2806次閱讀
- 淺析Hadoop集群硬件選擇 1648次閱讀
下載排行
本周
- 1TC358743XBG評估板參考手冊
- 1.36 MB | 330次下載 | 免費
- 2開關(guān)電源基礎(chǔ)知識
- 5.73 MB | 6次下載 | 免費
- 3100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 4嵌入式linux-聊天程序設(shè)計
- 0.60 MB | 3次下載 | 免費
- 5基于FPGA的光纖通信系統(tǒng)的設(shè)計與實現(xiàn)
- 0.61 MB | 2次下載 | 免費
- 6基于FPGA的C8051F單片機開發(fā)板設(shè)計
- 0.70 MB | 2次下載 | 免費
- 751單片機窗簾控制器仿真程序
- 1.93 MB | 2次下載 | 免費
- 8基于51單片機的RGB調(diào)色燈程序仿真
- 0.86 MB | 2次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 2555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33564次下載 | 免費
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費
- 4開關(guān)電源設(shè)計實例指南
- 未知 | 21548次下載 | 免費
- 5電氣工程師手冊免費下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費
- 6數(shù)字電路基礎(chǔ)pdf(下載)
- 未知 | 13750次下載 | 免費
- 7電子制作實例集錦 下載
- 未知 | 8113次下載 | 免費
- 8《LED驅(qū)動電路設(shè)計》 溫德爾著
- 0.00 MB | 6653次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537796次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191185次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183278次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138040次下載 | 免費
評論
查看更多