### 1.1 實驗目的
1. 熟悉大數據實驗一體機并了解如何搭建集群;
2. 熟悉Linux基本命令;
3. 掌握vi編輯器的使用;
4. 了解SSH免密登錄的原理以及為何需要配置SSH免密登錄;
5. 掌握如何配置SSH免密登錄;
6. 掌握Java基本命令;
### 1.2 實驗要求
1. 使用大數據實驗一體機搭建自己的集群;
2. 通過SSH工具登錄集群服務器;
3. 實現每臺服務器相互之間的免密登錄;
4. 通過vi編輯器編寫Java程序;
5. 通過Java命令編譯和運行編寫的Java程序;
6. 通過Jar命令打包編寫的Java程序;
### 1.4 實驗步驟
#### 1.4.1 搭建集群服務器
#### 1.4.2 使用SSH工具登錄每臺服務器
在搭建好的Hadoop集群中,已經有了所有五臺服務器的內部ip地址、ssh端口號、ssh登錄名以及ssh登錄密碼。
#### 1.4.3 添加域名映射
系統搭建好的集群服務器已經完成修改主機名、關閉防火墻、安裝JDK、同步時鐘四步操作,為了可以安裝大數據組件,還需為所有機器添加域名映射
使用ssh工具登錄到master服務器,使用vi命令編輯/etc/hosts文件:
~~~
[root@master ~]# vi /etc/hosts #root權限,編輯master的域名映射文件
#在文件的末尾追加寫入如下五行(具體的IP地址請替換為實際集群服務器內部ip):
172.17.0.7 master
172.17.0.10 slave1
172.17.0.33 slave2
172.17.0.8 slave3
172.17.0.34 client
~~~
保存退出后,master服務器的域名映射即添加完成,使用cat命令查看/etc/hosts文件。如圖1-15所示:

依次登錄slave1~3和client服務器,重復該操作。
#### 1.4.4 配置SSH免密登錄
**1.4.4.1 生成master服務器密鑰**
執行命令ssh-keygen,生成master服務器密鑰。如圖1-16所示:
~~~
[root@master ~]# ssh-keygen #root用戶,master機,生成公私鑰
~~~

如圖1-14所示,在master上執行“ssh-keygen”命令生成公私鑰。第一個提示是詢問將公私鑰文件存放在哪,直接回車,選擇默認位置。
第二個提示是請求用戶輸入密鑰,既然操作的目的就是實現SSH無密鑰登錄,故此處必須使用空密鑰,所謂的空密鑰指的是直接回車,不是空格,更不是其他字符。此處請讀者務必直接回車,使用空密鑰。第三個提示是要求用戶確認剛才輸入的密鑰,既然剛才是空密鑰(直接回車即空),那現在也應為空,直接回車即可。
最后,可通過命令“ls -all /root/.ssh”查看到,SSH密鑰文件夾.ssh目錄下的確生成了兩個文件id_rsa和id_rsa_pub,這兩個文件都有用,其中公鑰用于加密,私鑰用于解密。中間的rsa表示算法為RSA算法。
**1.4.4.2 拷貝master服務器公鑰至本機**
執行命令ssh-copy-id master,將master服務器公鑰拷貝至master服務器本身。如圖1-17所示:

第一次連接master時,需要輸入yes來確認建立授權的主機名訪問,并需要輸入root用戶密碼來完成公鑰文件傳輸。
**1.4.4.3 驗證master服務器ssh免密登錄master本身**
公鑰拷貝完成后,可以在master服務器上直接執行命令ssh master,查看是否可以免密登錄master服務器:
~~~
[root@master ~]# ssh master #root用戶,登錄本機網絡地址
[root@master ~]# exit #退出本次登錄
logout
Connection to master closed.
[root@master ~]#
~~~
**1.4.4.4 拷貝master服務器公鑰至其余服務器**
執行命令ssh-copy-id slave1,將master服務器公鑰拷貝至slave1服務器。如圖1-18所示:

第一次連接slave1時,需要輸入yes來確認建立授權的主機名訪問,并需要輸入root用戶密碼來完成公鑰文件傳輸。
依照同樣的方式將公鑰拷貝至slave2、slave3和client服務器。
**1.4.4.5 驗證master服務器ssh免密登錄其余服務器**
公鑰拷貝完成后,可以在master服務器上直接執行命令ssh master,查看是否可以免密登錄slave1~3和client服務器:
~~~
[root@master ~]# ssh localhost #root用戶,登錄本機環回地址
[root@master ~]# ssh master #root用戶,登錄本機網絡地址
[root@master ~]# ssh slave1 #root用戶,從master遠程登錄slave1
[root@master ~]# ssh slave2 #root用戶,從master遠程登錄slave2
[root@master ~]# ssh slave3 #root用戶,從master遠程登錄slave3
~~~
**1.4.4.6 其余服務器配置ssh免密登錄**
其余服務器按照同樣的方式配置ssh免密登錄,完成后驗證是否可以互相之間實現SSH免密登錄。
#### 1.4.5 在client服務器開發Java Helloworld程序
使用ssh工具登錄client服務器,使用vi編輯器編寫Helloworld.java:
~~~
public class Helloworld {
public static void main(String args[]) {
System.out.println("Hello World!");
}
}
~~~
使用javac命令編譯該程序,生成Helloworld.class文件:
~~~
[root@client ~]# javac Helloworld.java
[root@client ~]# ls
anaconda-ks.cfg data envSource Helloworld.class Helloworld.java
~~~
使用java命令執行該程序,輸出Hello World!
[root@client ~]# java Helloworld
Hello World!
- GitHub---資源收集
- 【GitHub】收錄總榜單
- 【Office & Markdown & PDF】資源收集
- 【前端】資源收集
- 【開源項目】資源收集
- 【代碼備份】資源收集
- 【代碼加密】資源收集
- 【好文章推薦】資源收集
- GitHub---實踐方案
- 【Laradock】實踐方案
- 【開發規范】實踐方案
- 【laravel-snappy】實踐方案
- 【隊列---Laravel-Horizon 】實踐方案
- 【檢索---Elasticsearch】實踐方案---簡單了解
- 【Laravel-admin】實踐方案
- 技術選型
- 技術選型結果
- PHP開發流程
- Laravel自帶異常
- 技術選型問題 & 解決方法
- 修改(Admin)文件夾路徑
- 兩個用戶表合并
- 創建Token,獲取接口數據
- CreateFreshApiToken中間件使用
- Generator從表生成文件,不包括遷移文件
- 添加用戶的同時生產令牌
- 其它參考文章
- Laravel-admin常見問題
- form(),show()獲取對象數據
- Form右上角按鈕重寫
- form回調中的錯誤提醒,回調傳參
- 【小工具類】實踐方案
- 字符串
- 數組
- 無限級分類遞歸
- 時間
- 正則表達式
- 文件
- 經緯度、時區
- DataEdit快捷操作類庫
- 數據庫表結構管理
- 【Guzzle】實踐方案---工具類
- Java---大數據在線實驗
- 基礎實驗操作
- 【一】基礎操作實驗
- HDFS
- 【二】部署HDFS
- 【三】讀寫HDFS文件
- YARN
- 【四】部署YARN集群
- MapReduce
- 【五】單詞計數
- Hive
- 【十】部署Hive
- 【十一】新建Hive表
- 【十二】Hive分區
- ZooKeeper
- 【二十】部署ZooKeeper
- 【二十一】進程協作
- HBase
- 【二十二】部署HBase
- 【二十三】新建HBase表
- Storm
- 【二十四】部署Storm
- 【二十五】實時WordCountTopology
- Kafka
- 【二十七】Kafka訂閱推送示例
- Redis
- 【二十九】Redis部署與簡單使用
- 【三十】MapReduce與Spark讀寫Redis
- MongoDB
- 【三十一】讀寫MongoDB
- MySQL
- 關于最重要的參數選項調整建議
- 索引,Explain優化工具
- 事務級別
- sql好的書寫習慣
- limit(分頁)
- 趕集網Mysql36條軍規
- 分庫分表技術演進&最佳實踐
- MariaDB 和 MySQL 全面對比
- 永遠不要在 MySQL 中使用“utf8”
- 看云--推薦的Mysql優化
- 完整、詳細的MySQL規范
- 慢查詢日志
- pt-query-digest結果分析
- Redis
- 看云-推薦的redis學習
- Memcache和Redis不同
- 阿里云Redis開發規范
- Centos7
- 虛擬機配置網絡
- 硬盤掛載、分區、文件大小
- 防火墻(firewalld、firewalld-cmd、systemctl、iptables)
- 兩個機器互相拷貝文件
- 查進程、查端口
- 壓縮、解壓
- 查看物理CPU個數、CPU內核數、線程數
- apt-get源--阿里
- RAID磁盤陣列
- Docker
- Dockerfile制作常用命令
- registry私有倉庫
- PHP_7.2
- Dockerfile
- php.ini
- 使用說明
- Nginx_1.15
- Dockerfile
- nginx.conf
- prod_nginx.conf
- 使用說明
- MySql_5.7
- Dockerfile
- my.cnf
- 使用說明
- redmine_3.4
- Dockerfile
- 使用說明
- gitlab-ce_11.9.6-ce.0
- 使用說明
- Redis_5.0
- Dockerfile
- redis.conf
- 使用說明
- Jenkins
- Dockerfile
- 使用說明
- webssh--python3.7
- Dockerfile
- 使用說明
- 進階使用
- 高階使用
- minio
- 使用說明
- aws_cloud9_ide
- 使用說明
- VNC
- 使用說明
- jdk1.8——yum安裝
- tomcat9——安裝
- guacamole——0.9.13
- libreoffice
- Dockerfile
- 使用說明
- Kubernetes
- kubectl常用命令
- 環境搭建(1.9.6)
- kubernetes1.9.6墻內離線部署
- kubernetes1.9.6單機器部署
- helm安裝
- helm常用命令
- Swoole
- 環境的搭建
- swoole的簡單實例
- 服務端的cli方式運行
- 客戶端的運行方式
- 定時任務的入門
- 刪除定時任務
- 初始化定時任務
- 日志管理
- 具體任務的異常捕獲
- 手動重啟shell腳本
- 閱讀感受
- 【讀書】登天的感覺——岳曉東
- 【讀書】為何家會傷人——武志紅
- 【感受】箭扣,一次就好
- 【讀書】思考與致富——拿破侖-希爾
- 【感受】做事講方法
- 【感受】未來暢想
- 【素材】智力問答
- 【百家】曾國藩家訓
- 【百家】正說和珅
- 【感受】談判小技巧
- 【讀書】股票作手回憶錄——利弗莫爾
- 【感受】最幸福的人——工匠
- 【收藏】土味情話大合集
- 【讀書】解憂雜貨店——東野圭吾
- 【收藏】家鄉名人
- 【讀書】把時間當作朋友——李笑來
- 【感受】輿論和八卦
- 【讀書】老人與海——海明威
- 【讀書】必然——凱文凱利
- 【經典】逍遙游——莊周
- Git+PHPStorm+Composer
- Git命令
- .gitignore忽略規則
- PHPStorm第一次使用
- PHPStorm關聯gitlab
- Composer修改鏡像源
- Xdebug
- PHP進階
- 緩存在高并發場景下的常見問題
- 一、緩存一致性問題
- 二、緩存并發問題
- 三、緩存穿透問題
- 四、緩存顛簸問題
- 五、緩存的雪崩現象
- 六、緩存無底洞現象
- Laravel源碼解析(知識點)
- 閉包、IOC容器服務綁定延遲加載
- 延遲靜態綁定基類
- 反射,依賴注入
- __callStatic 魔術方法,Facade 工作原理
- array_reduce,中間件解析
- Eloquent核心
- Laravel框架加載流程
- 線程、進程、協程
- Linux進程、線程、協程
- poll、epoll
- epoll原理
- Liunx線程調度算法
- 紅黑樹
- 同步/異步、阻塞/非阻塞
- PHP-FPM
- Nginx
- Swoole
- Go
- 驚群問題
- 線程模型比較
- 并發模型比較
- Lua
- OpenResty
- 數據一致性
- 悲觀鎖--VS--樂觀鎖
- 事務--mysql VS redis
- 事務嵌套--Doctrine VS Laravel
- 單體應用中執行順序問題
- 數據一致性問題描述
- 分布式理論
- 數據一致性---接口冪等性
- 分布式事務---2PC VS 3PC
- 分布式事務---TCC
- 分布式事務---基于消息
- 接口安全性
- PHP & Nginx
- 請求超時問題
- 兩者之間的通信原理
- TCP三次握手
- Nginx常用優化
- PHP數組底層原理
- PHP排序函數sort底層原理
- PHP函數---trim()
- 樹形數據在關系型庫中存儲
- 標簽(Tag)的各種設計