【⼤数据系列】win10上安装hadoop开发环境
为了⽅便采⽤了Cygwin模拟linux环境的⽅法
⼀、安装JDK以及下载hadoop
hadoop官⽹下载hadoop  。
⼆、安装Cygwin
1、根据操作系统的需要下载32位或64的安装⽂件。
2、双击下载好的安装⽂件进⼊安装引导页，选择从⽹络安装
3、选择安装路径
4、选择internet连接⽅式
5、选择合适的安装源
6、选择需要安装的软件包
net下的openssh和openssl
Base下的sed
Editors下的vim
7、等待安装完成
8、配置环境变量
9、安装sshd服务
启动Cygwin执⾏ssh-host-config - y
出现下述⽂字表⽰安装成功
10、启动sshd服务
net start sshd
三、安装hadoop
1、下载hadoop并解压
2、单机模式配置
单机模式不需要进⾏配置，这种⽅式下，Hadoop被认为是⼀个单独的Java进程，经常⽤来进⾏调试。
3、伪分布模式
伪分布模式可以看做是只有⼀个节点的集，在这个集中，这个节点既是Master也是Slave，既是NameNode也是DataNode，既是JobTracket也是TaskTranker.伪分布式需要修改配置⽂件hadoop-env.sh  l  l
<!--core-site-->
hadoop安装详细步骤linux
<configuration>
<property>
    <name>fs.default.name</name>
    <value>hdfs://localhost:9999</value>
  </property>
  <property>
    <name>p</name>
    <value>/cygdrive/d/hadoop/hadoop-2.8.0/tmp</value>
  </property>
</configuration>
<!--hdfs-site-->
<configuration>
<property>
  <name&plication</name>
  <value>1</value>
</property>
</configuration>
<!--l-->
<configuration>
<property>
      <name>acker</name>
      <value>localhost:9998</value>
      </property>
      <property>
      <name>p</name>
      <value>/cygdrive/d/hadoop/hadoop-2.8.0/tmp</value>
      </property>
</configuration>
4、启动hadoop
打开cygwin窗⼝，进⼊hadoop⽂件夹，启动hadoop之前需要先格式化Hadoop的⽂件系统HDFS，执⾏命令 bin/hadoop namenoce -format

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。