1、hadoop:由java语言开发的开源的分布式计算平台。可提供PB(100万G)存储。hadoop是可靠的,高效的,可伸缩的。
hadoop假设计算元素和存储会失败,维护多个副本,确保针对失败的节点重分布处理。文件以块的方式存储.
2、hadoop最核心的是hdfs和mapreduce,hdfs为海量存储提供存储。mapreduce为海量数据提供计算。mapreduce分为jobtrackers和taskreduce组成。
3、hadoop集群包含一个master和若干个slave角色。master称为namenode节点,slave为datanode节点。
4、hdfs命令
hdfs namenode -format:格式化hdfs文件系统
start-all.sh: 启动集群
jps: 查看节点进程
查看master统计信息和hdfs存储信息:http://masterip:50070
hadoop fs -普通命令: 管理hdfs文件命令
hdfs dfsadmin -report:查看节点状态信息
hdfs dfsadmin -safemode enter|leave|get 开启|关闭|查看 安全模式,在安全模式下只可查看不可写入
Hadoop安装与部署
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
hadoop一步步入门
lcyuanjiang
2019-02-23 13:59:15
高标准机房综合配线安装
wbzjacky
2019-02-24 13:12:38
VMware Tools 安装、卸载及配置
如沐陽光
2019-02-24 13:00:22
Oracle11g 基于linux 6.3下安装
love壁虎
2019-02-24 12:55:06
apache安装(1)
flashhand
2019-02-23 13:58:28
Centos下安装php5.3.10
flashhand
2019-02-23 13:58:28
CentOS 5.5 下安装 Mysql 5.5
flashhand
2019-02-23 13:58:27
vmlite虚拟机图文安装教程
lhslllj
2019-02-23 13:50:59
IBMDB2数据库软件安装教程
王澤民
2019-02-23 13:48:07
PXE网络全自动安装Linux
LQ_112
2019-02-23 13:47:18
关于Linux下oracle的显示中文乱码或不完整
781732825
2019-02-23 13:43:04
SQL 2008 R2安装部署及端口开放
vip2008
2019-02-23 13:42:18
Windows 7 安装时候提示,无法更改启动项安装失败,以及msr分区
781732825
2019-02-23 13:39:40
部署远程协助项目小感
lhs8609
2019-02-23 13:43:30
组策略之(2)-------部署Bginfo软件,桌面显示用户端信息
czq2008sky
2019-02-23 13:38:34