hadoop安装以及配置启动命令
本次安装使⽤的Hadoop⽂件是badou学院的Hadoop1.2.，以下步骤都是在此版本上进⾏。
1、安装，通过下载⽂件安装到指定⽬录
2、安装好后需要配置Hadoop集配置信息：
  在hadoop的conf路径中的masters中添加master(集机器主的hostname)在slaves中添加集的slave的hostname名称名称对应的是各⾃机器的hostname这样通过hosts⽂件中配置的域名地址映射可以直接到对应的机器
  a、l 在xml⽂件中添加<property><name&p.dir</name><value>/usr/local/src/hadoop.1.2.1/tmp</value>
</property>
    <property><name>fs.default.name</name><value>hdfs://192.168.79.10:9000</value></property>
  c、l 在⽂件中添加<property><name&plication</name><value>3</value></property><!-- 复制节点数 -->
  d、l 在⽂件中添加export JAVA_HOME=/usr/local/src/jdk1.6.0_45
  步骤2配置好后将当前hadoop⽂件夹复制到集中其他机器上，只需要在对应机器上修改其对应的ip、port、jdk路径等信息即可搭建集
hadoop安装详细步骤linux
3、配置好Hadoop环境后需要测试环境是否可⽤：
  a、⾸先进⼊Hadoop的安装⽬录，进⼊bin⽬录下，先将Hadoop环境初始化，命令：./hadoop namenode -format
  b、初始化之后启动Hadoop，命令:./start_all.sh
  c、查看Hadoop根⽬录下的⽂件，命令:./hadoop fs -ls/
  d、上传⽂件，命令:./hadoop fs -put ⽂件路径
  e、查看⽂件内容，命令：./hadoopo fs -cat hadoop⽂件地址
注意：在安装Hadoop环境时先安装好机器集，使得⾄少3台以上（含3台）机器之间可以免密互相登录（可以查看上⼀篇的linux的ssh免密登录）
执⾏Python⽂件时的部分配置
/usr/local/src/hadoop-1.2.1/bin/hadoop
/usr/local/src/hadoop-1.2.1/contrib/streaming/hadoop-streaming-1.2.1.jar

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。