一次成功：搭建K8S集群以及ISTIO环境
一、概述本文主要讲述在centos7环境下如何使用kubeadm工具快速搭建一个k8s集群。同时也讲述了如何安装Istiok8s版本：1.20.6istio版本：1.5.1二、准备工作2.1机器环境操作系统：centos764位硬件配置：2gRAM2个cpu硬盘40g|主机名|角色|IP||||
HDFS安装
最近内部需求，要求我把数据上传HDFS，顺便分享一下如何安装并查看HDFS文件目录我是在ubuntu(14.04.2)上安装的：1.我安装ubuntu用的不是Hadoop用户，所以要新建一个Hadoop用户 $ sudouseradd\mhadoops/bin/bash设置密码$sudo
Ubuntu16.04下安装Hive
上一篇博客我们已经说过了要如何安装Hadoop，别忘记了我们的目的是安装Hive。所以这篇博客，我就来介绍一下如何安装Hive。一、环境准备（1）Vmware (2) Ubuntu16.04 (3) Hadoop二、安装Hive (1)mysqlserver和mysqlclient的下载 $suhadoop
2021年最新版大数据面试题全面总结
更新内容和时间表大数据基础篇Part0：Java基础篇Part1：Java高级篇Part2：Java之JVM篇Part3：NIO和Netty篇Part4：分布式理论篇框架篇Part5：Hadoop之MapReducePart6：Hadoop
TiDB集群大规模删除实践
TiDB集群大规模删除实践一、背景集群在写入了一定的时间后，是存在一些历史可以删除的数据的，为了对集群的空间释放，我和业务一并讨论和计划了待删除的表，但是在drop数据时发现集群QPS有抖动，经过排查发现触发了compaction的流控集群配置集群版本：v3.0.5集群配置：普通SS
ESXI+软路由ROS，切换ESXI的管理IP，实现一个公网地址，管理所有虚拟机。
背景描述：由于业务需求，需要搭建esxi虚拟化集群来实现需求；条件描述： 公网地址：192.168.2.100 仅一个 私网地址：192.168.3.100 3.0网段可以配置于内部虚拟机 每台esxi只有一个公网地址，每台esxi系统内部的虚拟机需要数据传输，解决这个问题，我们可以做端口映射； 最终发
Hadoop源代码分析（包hadoop.mapred中的MapReduce接口）
前面已经完成了对org.apache.hadoop.mapreduce的分析，这个包提供了HadoopMapReduce部分的应用API，用于用户实现自己的MapReduce应用。但这些接口是给未来的MapReduce应用的，目前MapReduce框架还是使用老系统（参考补丁HADOOP1230(https://www.oschina.net/act
HBase 启动后HMaster进程自动消失
原因分析1、hadoop与hbase版本不兼容，导致的异常。2、log日志信息显示org.apache.hadoop.hbase.TableExistsException:hbase:namespace异常，可能是更换了hbase的版本后zookeeper还保留着上一次的hbase设置，造成了冲突。解决方案1、
Spring cloud实现FeignClient指定Zone调用
本文基于SpringCloudFincheleySR3背景介绍目前项目多个区域多个集群，这些集群共用同一个Eureka集群。通过设置eureka.instance.metadatamap.zone设置不同实例所属的zone，zone之间不互相调用，只有zone内部调用（其实这里用zone做了集群隔离，实际上集群肯定是跨可用区
