資料介紹
如何快速搭建Hadoop運行環境
Hadoop 是一個分布式系統基礎架構,在大數據領域被廣泛的使用,它將大數據處理引擎盡可能的靠近存儲,Hadoop 最核心的設計就是 HDFS 和 MapReduce,HDFS 為海量的數據提供了存儲,MapReduce 為海量的數據提供了計算。這篇文章主要就是介紹一下如何搭建一個 Hadoop 運行環境。
我們使用 Linux 操作系統來搭建環境,下面的信息是用來準備搭建 Hadoop 環境的電腦環境信息。
1. hadoop@ubuntu:~$ cat /etc/os-release
2. NAME=“Ubuntu”
3. VERSION=“14.04.5 LTS, Trusty Tahr”
4. ID=ubuntu
5. ID_LIKE=debian
6. PRETTY_NAME=“Ubuntu 14.04.5 LTS”
7. VERSION_ID=“14.04”
8. HOME_URL=“http://www.ubuntu.com/”
9. SUPPORT_URL=“http://help.ubuntu.com/”
10. BUG_REPORT_URL=“http://bugs.launchpad.net/ubuntu/”
緊接著來新建一個用戶,這一步其實也可以省略的,可以根據實際情況來決定,這里是新建了一個叫 hadoop 的新用戶。
1. #創建新用戶
2. sudo useradd -m hadoop -s /bin/bash
3. #設置密碼
4. sudo passwd hadoop
5. #為hadoop用戶增加管理員權限
6. sudo adduser hadoop sudo
7. #切換到hadoop用戶
8. su hadoop
我們首先來設置一下 SSH 無密碼登錄,這一步建議都設置一下,因為分布式系統環境都是由多臺浪潮服務器構成的,設置免密碼登錄會方便使用。
1. #先檢查下是否可以在沒有密碼的情況下ssh到localhost
2. ssh localhost
3. #如果在沒有密碼的情況下無法ssh到localhost,請執行以下命令
4. ssh-keygen -t rsa -P ‘’ -f ~/.ssh/id_rsa
5. cat ~/.ssh/id_rsa.pub 》》 ~/.ssh/authorized_keys
6. chmod 0600 ~/.ssh/authorized_keys
- 3568編譯環境搭建
- Apache2.2.x+PHP5.3.x+MySQL5.1.x-搭建WMAP運行環境
- 基于BGP MPLS的以太網VPN環境搭建源碼 16次下載
- 如何搭建移動物聯網Android的開發環境 1次下載
- 如何在Linux環境下實現Python環境的搭建 14次下載
- 如何才能在Linux系統下搭建51單片機的開發燒寫環境
- 在Proteus環境下搭建生產運行參數的多路信號監測系統的詳細資料說明 4次下載
- 怎么樣才能使用proteus進行仿真?
- 如何在Linux環境下搭建51單片機的開發燒寫環境
- 如何在Mac下搭建PHP開發環境 14次下載
- redhat搭建PHP運行環境LAMP的詳細資料說明 6次下載
- 如何使用PHPStudy和APMServ快速搭建PHP 7次下載
- 基于Hadoop與聚類分析的網絡日志分析模型 0次下載
- hadoop大數據windows搭建環境 4次下載
- Hadoop環境的搭建與管理--謝志明 0次下載
- 如何搭建Python編程環境 4945次閱讀
- 為MindSDK搭建armgcc編譯環境(Windows版) 1104次閱讀
- HPM6750開發環境搭建及快速上手 3487次閱讀
- OpenHarmony開發環境搭建方法 2262次閱讀
- 如何搭建鴻蒙開發環境 3545次閱讀
- 虛擬機:Hadoop集群的搭建 3097次閱讀
- 什么是Hadoop? Spark和Hadoop對比 6751次閱讀
- php開發環境的搭建和使用 3330次閱讀
- 搭建測試環境常用linux命令_linux下web測試環境的搭建 1.1w次閱讀
- 測試環境的搭建和維護_軟硬件測試環境 6661次閱讀
- 如何搭建hadoop平臺_hadoop平臺搭建步驟 9042次閱讀
- hadoop基礎知識介紹_hadoop是什么語言開發的_hadoop能做什么 3.9w次閱讀
- hadoop技術原理總結 4140次閱讀
- hadoop開發環境搭建 2806次閱讀
- 淺析Hadoop集群硬件選擇 1648次閱讀
下載排行
本周
- 1TC358743XBG評估板參考手冊
- 1.36 MB | 330次下載 | 免費
- 2開關電源基礎知識
- 5.73 MB | 6次下載 | 免費
- 3100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 4嵌入式linux-聊天程序設計
- 0.60 MB | 3次下載 | 免費
- 5基于FPGA的光纖通信系統的設計與實現
- 0.61 MB | 2次下載 | 免費
- 6基于FPGA的C8051F單片機開發板設計
- 0.70 MB | 2次下載 | 免費
- 751單片機窗簾控制器仿真程序
- 1.93 MB | 2次下載 | 免費
- 8基于51單片機的RGB調色燈程序仿真
- 0.86 MB | 2次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 2555集成電路應用800例(新編版)
- 0.00 MB | 33564次下載 | 免費
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費
- 4開關電源設計實例指南
- 未知 | 21548次下載 | 免費
- 5電氣工程師手冊免費下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費
- 6數字電路基礎pdf(下載)
- 未知 | 13750次下載 | 免費
- 7電子制作實例集錦 下載
- 未知 | 8113次下載 | 免費
- 8《LED驅動電路設計》 溫德爾著
- 0.00 MB | 6653次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537796次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191185次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183278次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138040次下載 | 免費
評論
查看更多