hive(02)、数据仓库Hive的基本使用
在上篇《hive(01)、基于hadoop集群的数据仓库Hive搭建实践(https://my.oschina.net/zss1993/blog/1602402)》一文中我们搭建了分布式的数据仓库Hive服务，本文主要是在上文的基础上结合Hadoop分布式文件系统，将结构化的数据文件映射为一张数据库表，将sql语句转换为MapRedu
基于Hadoop3的HA集群搭建
集群规划|node01|node02|node03||||||NameNode|NameNode|NameNode||ZKFC|ZKFC|ZKFC||JournalNode
Eclipse连接Hadoop集群并运行wordCount全过程记录
为了自己以后方便会看记录一下整个过程，Hadoop集群之前已经搭建好，这部分工作以后再补写。环境：win10 Eclipse4.4.2 JDK1.7 Hadoop2.7.1 相关安装文件可在文末的链接下载1.加载eclipse插件（1）下载hadoopeclipseplugin插件，此处下载了had
Hadoop2.7.3完全分布式集群安装过程
需要安装的软件Hadoop包含HDFS集群和YARN集群。部署Hadoop就是部署HDFS和YARN集群。机器数量、角色4台。NameNode1台、DataNode3台主机名IP角色amaster192.168.37.143NameNode:9000ResourceManag
ubuntu18.04.2 hadoop3.1.2+zookeeper3.5.5高可用完全分布式集群搭建
ubuntu18.04.2hadoop3.1.2zookeeper3.5.5高可用完全分布式集群搭建集群规划：hostnameNameNodeDataNodeJournalNodeResourceManagerZookeepernode01√√√node02√√node03√√
Hadoop之Shell脚本自动启动
在用Hadoop进行大数据分析处理时，通常配置的服务器不止一两台。为了减少人工操作的重复性，所以hadoop提供了可以自动启动Hadoop集群的Shell脚本。在使用Shell脚本启动集群之前，需要进行相应的配置。说明：$HADOOP\_HOME/root/project/hadoop（根据自己配置的路径不同而不同）打开$HADOOP\_H
HBase跨集群表复制
概述A集群HBase中有个表testTableCopy,要将其复制到B集群的HBase中。使用HBase表复制工具./hbaseorg.apache.hadoop.hbase.mapreduce.CopyTableroot@host:/tstar/hbase/bin./hbaseorg.apache.hadoop.hba
(二)大数据生态圈集群搭建之
搭建流程说明下载安装包高可用完全分布式搭建一.集群规划二.hadoop安装配置三.zookeeper安装配置四.集群格式化五.启动,操作,关闭集群六.访问NameNode的WebUI页面七.搭建Hadoop的client说明
Linux 搭建Hadoop集群错误锦集
一、Hadoop集群配置好后，执行startdfs.sh后报错，一堆permissiondeniedzfsbin$./startdfs.shStartingnamenodesonmastermaster:chown:changingownershipof'/home/zf/hadoop/hado
Hadoop面试45个题目及答案
本人博客开始迁移，博客整个架构自己搭建及编码http://www.cookqq.com/listBlog.action(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.cookqq.com%2FlistBlog.action)1.Hadoop集群可以运行的3个模式？