推荐
专栏
教程
课程
飞鹅
本次共找到2138条
hadoop集群搭建
相关的信息
可莉
•
3年前
15.linux上安装kubectl和Minikube
1.安装kubectlkubectl是负责与k8s集群talk的工具,就像dockercli对话docker集群一样地址:https://kubernetes.io/docs/tasks/tools/installkubectl/Linux环境步骤:下载kubectl文件(因为涉及到翻墙的问
Stella981
•
3年前
Hive SQL使用过程中的奇怪现象
hive是基于Hadoop的一个数据仓库工具,用来进行数据的ETL,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能。HiveSQL是一种类SQL语言,与关系型数据库所支持的SQL语法存在微小的差异。本文对比MySQL和Hive所支持的SQL语法,发现相同的SQL语句在
Stella981
•
3年前
Kafka集群环境配置
Kafka集群环境配置1环境准备1.1集群规划Node02Node03Node04zkzkzkkafkakafkakafka1.2jar包下载安装包:kafka\_2.110.8.2.1.tgz下载地址:http://kafka.apache.org/downl
Stella981
•
3年前
Ceph Block Device块设备操作
使用cephblockdevice需要如下三个步骤:1\.在ceph集群的pool中创建一个BlockDeviceimage.2\.cephClient使用RBD设备与ceph集群的BlockDeviceimage进行映射(Map)。3\.cephClient的UserSpace便可以挂载(Mount)该RBD设备。
此账号已注销
•
3年前
Clusternet v0.5.0 重磅发布: 全面解决多集群应用分发的差异化配置难题
作者徐迪,腾讯云容器技术专家。汝英哲,腾讯云高级产品经理。摘要在做多集群应用分发的时候,经常会遇到以下的差异化问题,比如:1.在分发的资源上全部打上统一的标签,比如apps.my.company/deployedby:myplatform;2.在分发到子集群的资源上标记集群的信息,比如apps.my.company/runningin:clus
Wesley13
•
3年前
3、交付Dubbo微服务到kubernetes集群
1.基础架构1.1.架构图!(https://img2018.cnblogs.com/blog/1373757/201912/137375720191212011346697105741216.png)Zookeeper是Dubbo微服务集群的注册中心它的高可用机制和k8s的etcd集群
Stella981
•
3年前
Docker Swarm集群初探
前言相信Docker技术大家都有所了解,单个Docker能发挥的作用毕竟有限,也不便于管理,所以Docker得组集群来使用才能发挥强大的技术优势。既然要组集群那就涉及诸如Docker的资源调度、管理等等一系列问题。目前涉及Docker集群的三个主要的技术无外乎Swarm、Kubernetes(https://www.oschina.net/ac
Stella981
•
3年前
Hadoop云计算的初步认识
在说Hadoop之前,作为一个铁杆粉丝先粉一下Google。Google的伟大之处不仅在于它建立了一个强悍的搜索引擎,它还创造了几项革命性的技术:GFS,MapReduce,BigTable,即所谓的Google三驾马车。Google虽然没有公布这几项技术的实现代码,但它发表了详细的设计论文,这给业界带来了新鲜气息,很快就出现了类似于Google三驾马车的开
Stella981
•
3年前
Socket.io的集群方案
介绍Nodejs因其简单方便,在服务端应用市场也开始占有一席之地,其另外一个分支socket.io(最后跟nodejs好像又要合并了),特别适合聊天室、白板(documentcollabration)、在线实时计算、计数器等应用,如果要支持大容量应用,就需要使用集群技术了,下面逐一讨论常见的socket.io集群方案。集群方
Stella981
•
3年前
Hive
解释:1、JVM重用是hadoop调优参数的内容,对hive的性能具有非常大的影响,特别是对于很难避免小文件的场景或者task特别多的场景,这类场景大多数执行时间都很短。hadoop默认配置是使用派生JVM来执行map和reduce任务的,这是jvm的启动过程可能会造成相当大的开销,尤其是执行的job包含有成千上万个task任务的情况。JVM重用可
1
•••
29
30
31
•••
214