原创 hadoop性能指標和hadoop的日誌

Hadoop 指標類型Hadoopde 守護進程的指標根據它們所屬的上下文可以分爲不同的組,如下所述: JVM指標:這些指標由集羣中運行的JVM產生包括JVM堆大小和垃圾回收相關指標,例如當前的堆內存(MemHeapUsed)的使用情況和總

原创 HDFS命令及管理HDFS

使用hdfs是一項最常見的hadoop集羣管理工作,雖然可以通過多種方式訪問HDFS,但命令行是管理HDFS存儲的最常用的方法。例如webHDFS、使用HttpFS網關通過防火牆訪問HDFS、通過Hue的文件瀏覽器。使用 hdfs : df

原创 NFS企業級網絡文件共享

企業級NFS網絡文件共享服務 1、NFS介紹什麼是NFS?NFS是network file system的縮寫,中文意思是網絡文件系統。它的主要功能是通過網絡(一般是局域網) 讓不同的主機

原创 inotify實時無差異同步

Inotify簡介     Inotify是一種強大的、細粒度、異步的文件系統時間監測事件,linux內核從2.6.13起,加入了inotify支持,通過inotify可以監控文件系統中添加、刪除,修改、移動等各種事件,利用這個內核接口,第