1)在master主机上生成密码对sshkeygen–trsa–P''确认一路回车，命令默认会在用户主目录下生成.ssh目录，你们有两密钥对文件：id\_rsa和id\_rsa.pubmaster@hadoop~$ll.ssh/rw.1mastermaster1675Jun

本文旨在站在研发的角度上通过手动实践搭建运行环境，文中不拖泥带水过多讲述基础知识，结合Hadoop和Spark最新版本，帮助大家跟着步骤一步步实践环境搭建。

500GJAVA视频网盘分享(JEECG开源社区)\涵盖从java入门到深入架构，Linux、云计算、分布式、大数据Hadoop、ios、Android、互联网技术应有尽有\500GJAVA视频网盘分享(JEECG开源社区)\涵盖从java入门

注：该教程转自厦门大学大数据课程学习总结Spark的安装过程较为简单，在已安装好Hadoop的前提下，经过简单配置即可使用。安装Spark1.sudotar\zxf~/下载/spark1.6.2binwithouthadoop.tgzC/usr/local/

 最近项目组用CDH搭建数据开发环境，有用到Kerberos安全组件。如下是相关命令，请参考：进入kadminkadmin.local/kadmin创建数据库kdb5\_utilcreater HADOOP.COMs　启动kdc服务servicekrb5kdcstart启动kadmin服务serviceka

1.从官网下载安装包http://kafka.apache.org/downloads2.上传到01虚拟机，解压3.进入安装目录下的config目录4.对server.properties进行配置\root@hadoop01config\vimserver.properties配置示例：broker

关于安装请见CDH版本大数据集群下搭建Hue（hadoop2.6.0cdh5.5.4.gzhue3.9.0cdh5.5.4.tar.gz）（博主推荐）(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.cnblogs.com%2Fzlslch%2Fp%2F6

一、前提条件　　安装了Zookeeper、Hadoop HDFS HA 安装方法： http://www.cnblogs.com/raphael5200/p/5154325.html(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.cnblogs.com%2Fraph

  在CentOS6.6上尝试安装hadoop时，遇到了yumpycurcouldn'tresolvehost的错误，但能ping通域名，尝试了网上的好多方法，终于找到了一个合理的解释，并解决了问题。 详细见curl:(6)Couldn’tresolvehost(https://www.oschina.net/action/G

接着上篇：https://my.oschina.net/u/988386/blog/802045(https://my.oschina.net/u/988386/blog/802045)上篇安装完成了hadoop，接下来安装zookeeper。安装zookeeper    (2台机器配置基本相同）!/bin/bash