安裝 Ambari 並啟動完成後,由 UI 介面建立 HDFS cluster。
【Hortonworks Ambari】研究筆記(四):建立 HDFS cluster
- 1791
- 0
- Hortonworks Ambari 研究筆記
- 2017-08-15
安裝 Ambari 並啟動完成後,由 UI 介面建立 HDFS cluster。
在環境配置與系統設定完成後,開始安裝 Ambari。
規劃整個測試環境所需要的主機與所屬角色,並調整相關系統設定。
因為之前公司儲存裝置有些問題,所以研究了 HDFS 分散式的解決方案,主要是想解決硬體擴充、自動轉移及備份機制…等問題。
雖然最後沒有採用,但也把當初測試的部分整理並寫下來做紀錄。
常常在 Windows 設定環境變數的人都知道,Windows 本身提供的操作介面並不友善,每次設定時都需要小心謹慎並反覆檢查,深怕會不小心動到其他變數。
然而自從開始使用 Rapid Environment Editor 以後,一切都變得簡單了…
為了確保資料不遺失,常常需要備份檔案。
腦筋進水的時候就容易出錯或弄亂,該如何確定哪些資料夾、哪些檔案曾經備份過呢?
文書處理上,常常需要比對兩個檔案前後版本的差異。
使用肉眼來進行比對,耗時費力不說,也很傷眼傷神,更慘的是比對資料人員通常也無法保證是否完成了全部比對…
WinMerge 是一套專門針對檔案內容進行比對的軟體,同時也可以對資料夾內檔案進行比對。
使用 Directory 或 DirectoryInfo 取得的檔案列表中會包括系統檔案(系統檔、隱藏檔、暫存檔…等)。
大部分的情況下,這些系統檔案都需要被過濾排除…記錄一些平常篩選檔案的方法。
每次在連線遠端主機時,都會跳出輸入帳號密碼的驗證。
剛開始都乖乖地輸入,後來感覺實在有點麻煩…開始尋找是否有省去這項驗證的方法。
可以使用本機金鑰搭配遠端主機的 Authorized_keys 進行驗證,省去每次都要輸入帳號密碼的麻煩。
某次使用 CentOS 7 安裝 NTP 服務並加載服務,重新開機後卻發現 NTP 服務仍然為停用狀態。
記錄 CentOS 7 主機名稱與 Hosts 設定檔的位置。