一、如何给100亿个数字进行排序？ 1.1解答：1.把这个37GB的大文件，用哈希分成1000个小文件，每个小文件平均38MB左右（理想情况），把100亿个数字对1000取模，模出来的结果在0到999之间，每个结果对应一个文件，所以我这里取的哈希函数是hx%1000，哈希函数取得"好"，能使冲突减小，结果分布均匀。2.拆分完了之后

作者黄雷，腾讯云高级工程师，曾负责构建腾讯云云监控新一代多维业务监控系统，擅长大规模分布式监控系统设计，对golang后台项目架构设计有较深理解，后加入TKE团队，致力于研究Kubernetes相关运维技术，拥有多年Kubernetes集群联邦运维管理经验，目前在团队主要负责大规模集群联邦可观测性提升，主导研发了腾讯云万级Kubernetes

概述对于分布式系统的调试不知道大家有什么好的方法。对于我来说，在知道远程调试这个方法之前就是在代码中打各种log，然后重新部署，上线，调试，这样比较费时。今天咱们来了解了解Java远程调试这个牛逼的功能，本文以IntellijIDEA为例讲解怎么使用远程调试。以Thrift入门教程这篇文章中使用的程序作为例子。这个程序由Thrift服务端和客户端

一、HDFS个人理解      HDFS是个文件系统，只不过加了个分布式作为文件系统的前缀而已，大概的结构就像LINUX系统。文件大的一个电脑存储不下，怎办？那就想办法存储到不同的机子上呗，于是HDFS就应用而生了。众所周知，文件在硬盘上是以文件块的形式存储。什么句柄啊，真心不懂，只能感知，没人能明白0和1，当然也没必要。二、Map个人理解

一、深入理解超平面很多讲解支持向量机的文章从一开头就开始讲超平面及其方程，这样对多数没有基础的人来说较难理解，下面将从一维直线讲起，带你逐步过渡理解超平面。例如，下面是一个只有x轴的一维坐标轴，该轴同样存在原点，x轴正方向和x轴反方向，且该轴上分布了很多点：!(https://oscimg.oschina.net/oscnet/2d9

TiDB已经在项目中使用，从了解来看，它主要解决的是分布式事务的问题，而我们实际使用场景，却是大数据量下不需要关注分表；最近实在忙加懒，一直没时间看TiDB的原理。今天看了下PingCAP3篇入门介绍，收获挺多；首先TiDB的存储使用的是KV，名字叫TiKV，实际数据落地使用的是Facebook开源的RocksDB；RocksDB只能支持单机存储

CoreOS集群的架设比架设一个传统服务器集群更加容易。一方面因为CoreOS使用了Cloudinit自动化了集群信息的配置，另一方面则是受益于etcd分布式存储实现的消息分发和服务器自发现机制。这些便利性正是CoreOS系统设计充分为集群架构考虑带来的效率提升。安装CoreOSCoreOS的安装方法和传统Linux系统有

Git是一个分布式的版本控制系统，最初由LinusTorvalds编写，用作Linux内核代码的管理。作为一个程序员，我们需要掌握其用法。作为开源代码库以及版本控制系统，Github目前拥有140多万开发者用户。随着越来越多的应用程序转移到了云上，Github已经成为了管理软件开发以及发现已有代码的首选方法。其联合创始人ChrisWanstrath曾

JavaJava是一门面向对象编程语言，不仅吸收了C语言的各种优点，还摒弃了C里难以理解的多继承、指针等概念，因此Java语言具有功能强大和简单易用两个特征。Java语言作为静态面向对象编程语言的代表，极好地实现了面向对象理论，允许程序员以优雅的思维方式进行复杂的编程。Java具有简单性、面向对象、分布式、健壮性、安全性、平台独立

Java是一门面向对象编程语言。不仅吸收了C语言的各种优点，还摒弃了C里难以理解的多继承、指针等概念，因此Java语言具有功能强大和简单易用两个特征。Java语言作为静态面向对象编程语言的代表，极好地实现了面向对象理论，允许程序员以优雅的思维方式进行复杂的编程。Java具有：简单性面向对象分布式健壮性安全性