九章 九章
4年前
深入浅出理解DiskLruCache
什么是DiskLruCache?简单来说,DiskLruCache是一种管理数据存储的技术,单从Cache的字面意思也可以理解到,"Cache","高速缓存"。在很多我们接触的APP中,大多数APP是利用了这一技术的,例如:微博,网易新闻,QQ等等。当无网络时,打开这类APP时,是不能接收网络数据的,但是你会发现
Stella981 Stella981
4年前
MapReduce之Shuffle,自定义对象,排序已经Combiner
1\.Shuffle:MapReduce的计算模型主要分为三个阶段,Map,shuffle,Reduce。Map负责数据的过滤,将文件中的数据转化为键值对,Reduce负责合并将具有相同的键的值进行处理合并然后输出到HDFS。为了让Reduce可以并行处理map的结果,必须对Map的输出进行一定的排序和分割,然后交个Red
Stella981 Stella981
4年前
Spring Boot 实现配置文件加解密原理
SpringBoot配置文件加解密原理就这么简单背景接上文《失踪人口回归,mybatisplus3.3.2发布》\1\,提供了一个非常实用的功能「数据安全保护」功能,不仅支持数据源的配置加密,对于springboot全局的yml/properties文件均可实现敏感信息加密功能,在一定的程度上控制开发人员流动导致
Wesley13 Wesley13
4年前
2017微信数据报告:日活跃用户达9亿、日发消息380亿条
1、引言2017年11月9日,微信团队在成都腾讯全球合作伙伴大会上为全球伙伴解读了最新的《2017微信数据报告》。微信每天有多少条消息被发送?目前有多少个行业已经在使用小程序了?答案尽在其中!2、报告详情(数据截至2017年9月)!(https://uploadimages.jianshu.
Stella981 Stella981
4年前
MapReduce的自定义排序、分区和分组
自定义排序(WritableComparable)当写mr程序来处理文本时,经常会将处理后的信息封装到我们自定义的bean中,并将bean作为map输出的key来传输而mr程序会在处理数据的过程中(传输到reduce之前)对数据排序(如:map端生成的文件中的内容分区且区内有序)。操作:自定
Stella981 Stella981
4年前
Knative 实战:基于阿里云 Kafka 实现消息推送
在Knative中已经提供了对Kafka事件源的支持,那么如何在阿里云上基于Kafka实现消息推送,本文给大家解锁这一新的姿势。背景消息队列forApacheKafka是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。消息队列forApacheKafka广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等
Wesley13 Wesley13
4年前
MySql 8+版本 load data出错的问题
MySql数据库升级到8以上时,对于开发人员来说非常好用的数据批量导入的工具loaddata使用会出现一些小问题。这里简单总结一下,如果可以帮大家省时间最好不过了简单粗暴,围绕出啥错,为什么,怎么解决三点开始正文错误:ERROR1148:TheusedcommandisnotallowedwiththisM
Wesley13 Wesley13
4年前
C#中怎样连接数据库并将查询结果转为实体类以及如何加入事务
场景新建一个程序,需要对数据的表进行查询并将查询结果转换为实体类,然后将多个实体类再插入到另一个数据库的表中,执行插入的过程中要使用事务。注:博客主页:https://blog.csdn.net/badao\_liumang\_qizhi(https://www.oschina.net/action/GoToLink?url
Stella981 Stella981
4年前
RoadFlow ASP.NET Core工作流快速入门
RoadFlow新建一个流程分为以下几步:1、建表   在数据库建一张自己的业务表(根据你自己的业务需要确定表字段,如请假流程就有,请假人、请假时间、请假天数等字段),数据表必须要有一个主键,主键类型是(int自增,或者guid(uniqueidentifier)类型)。    !image.png(http://www.r
Stella981 Stella981
4年前
Dubbo 负载均衡的实现
!(https://oscimg.oschina.net/oscnet/up05fdf662c6edbce3df477a1fc6d5818d3af.png)前言负载均衡是指在集群中,将多个数据请求分散在不同单元上进行执行,主要为了提高系统容错能力和加强系统对数据的处理能力。在Dubbo中,一次服务的调用就是对所有实体域Inv