需求：支持大文件批量上传（20G）和下载，同时需要保证上传期间用户电脑不出现卡死等体验；内网百兆网络上传速度为12MB/S服务器内存占用低支持文件夹上传，文件夹中的文件数量达到1万个以上，且包含层级结构。支持PC端全平台操作系统，Windows,Linux,Mac支持文件和文件夹的批量下载，断点续传。刷新页面后继续传输。关闭浏览器后保

前后端差点打起来事情是这样的：今天我们公司的后端说他接口写完了，并分享了一个接口文档给我。用的就是SwaggerUI自动生成的那种接口文档，就像这种：这种Swagger文档我每次看着就头大，毛病多多：查看多级模型时要一级级点开在接口数量变多的时候非常难用，连分类菜单都没有提交参数为JSON的时候不能格式化参数出错的时候查找麻烦返回结果

出现502badgateway错误的原因1.phpfpm进程数不够用2.Linux内核打开文件数量小3.脚本执行时间超时4.缓存设置比较小网站间歇性出现502，第一反应不是程序的问题，而是nginx服务器的问题，因为这是代理服务器出现的问题，代理服务器并没有安装php排除第一中情况。于此想到的是可能是超时，所以我把超时修

一、前言在分布式、微服务系统架构中，一个大的项目在进行服务拆分之后，变成了众多个子服务，由于服务的数量居多，每个服务都有自己的一套配置文件，这时候就不像传统的单体架构SSM、SSH、以及当下比较流行的SpringBoot快速开发框架，一个项目基本一份配置文件就可以搞定。而在微服务项目架构中，为了方便众多个服务的配置文件统一进行集中管

最近在整理redis分布式集群，首先就整理一下分布式算法原理。常见的分区规则有哈希分区和顺序分区两种，Redis采用的是哈希分区规则。节点取余分区使用特定的数据，如Redis的键或用户ID为key，节点数量为N，则：hash(key)%N，计算出哈希值，然后决定映射到哪个节点上，如节点数为4时，哈希值的结果可能为0、1、2，3.现假

最近在运行Informatica全量抽取时候，系统报了很多莫名的错误，日志也没有显示警告信息。按有限的日志信息查询，可能的原因一般是磁盘空间不够，内存不够，或者是数据量量太大，缓存爆了。经排查，是加载的数据量过大，导致了数据加载的失败。只好通过限制每次的加载数量，分批多次进行跑数据了。业务系统使用的是Mysql数据库，因此在ODS层抽数时候，使用

shorturl实现常见的做法都是将原始Url存储到数据库，由数据库返回一个对应ID。以下要实现的是不用数据库支持就对原始URL进行shorturlhash。说到这里我们很容易想到MD5，固定长度，冲突概率小，但是32个字符，太长？我们以MD5为基础，将其字符缩短，同时要保证一定数量范围内hash不会冲突。我们分成两个步骤来实现。第一步算法：

在系统开发中，我们经常需要保护一些安全性较高的接口，限制这些接口每秒处理的请求数量。例如对于一个计算密集型接口，假设压测值是100rps,如果实际情况长期高于这个值，则会引起滚雪球效应，最终导致系统崩溃。下面我们一起来看看如何在Play中实现一个完全异步非阻塞的请求限速？本文代码已提交至 playcommunity(https://www.os

Kafka中的消息是以主题为基本单位进行归类的，各个主题在逻辑上相互独立。每个主题又可以分为一个或多个分区，分区的数量可以在主题创建的时候指定，也可以在之后修改。每条消息在发送的时候会根据分区规则被追加到指定的分区中，分区中的每条消息都会被分配一个唯一的序列号，也就是通常所说的偏移量（offset），具有4个分区的主题的逻辑结构见下图。!(http

20w的QPS的场景下，服务端架构应如何设计？常规解决方案可使用分布式缓存来抗，比如redis集群，6主6从，主提供读写，从作为备，不提供读写服务。1台平均抗3w并发，还可以抗住，如果QPS达到100w,通过增加redis集群中的机器数量，可以扩展缓存的容量和并发读写能力。同时，缓存数据对于应用来讲都是共享的，主从架构，实现高可用。