九章 九章
4年前
深入浅出理解DiskLruCache
什么是DiskLruCache?简单来说,DiskLruCache是一种管理数据存储的技术,单从Cache的字面意思也可以理解到,"Cache","高速缓存"。在很多我们接触的APP中,大多数APP是利用了这一技术的,例如:微博,网易新闻,QQ等等。当无网络时,打开这类APP时,是不能接收网络数据的,但是你会发现
Stella981 Stella981
3年前
MapReduce之Shuffle,自定义对象,排序已经Combiner
1\.Shuffle:MapReduce的计算模型主要分为三个阶段,Map,shuffle,Reduce。Map负责数据的过滤,将文件中的数据转化为键值对,Reduce负责合并将具有相同的键的值进行处理合并然后输出到HDFS。为了让Reduce可以并行处理map的结果,必须对Map的输出进行一定的排序和分割,然后交个Red
Wesley13 Wesley13
3年前
2017微信数据报告:日活跃用户达9亿、日发消息380亿条
1、引言2017年11月9日,微信团队在成都腾讯全球合作伙伴大会上为全球伙伴解读了最新的《2017微信数据报告》。微信每天有多少条消息被发送?目前有多少个行业已经在使用小程序了?答案尽在其中!2、报告详情(数据截至2017年9月)!(https://uploadimages.jianshu.
Wesley13 Wesley13
3年前
lxml简明教程
from:https://www.cnblogs.com/ospider/p/5911339.html最近要做下微信爬虫,之前写个小东西都是直接用正则提取数据就算了,如果需要更稳定的提取数据,还是使用xpath定位元素比较可靠。周末没事,从爬虫的角度研究了一下pythonxml相关的库。Python标准库中自带了xml模块,但是性能不
Stella981 Stella981
3年前
Knative 实战:基于阿里云 Kafka 实现消息推送
在Knative中已经提供了对Kafka事件源的支持,那么如何在阿里云上基于Kafka实现消息推送,本文给大家解锁这一新的姿势。背景消息队列forApacheKafka是阿里云提供的分布式、高吞吐、可扩展的消息队列服务。消息队列forApacheKafka广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等
Wesley13 Wesley13
3年前
MySql 8+版本 load data出错的问题
MySql数据库升级到8以上时,对于开发人员来说非常好用的数据批量导入的工具loaddata使用会出现一些小问题。这里简单总结一下,如果可以帮大家省时间最好不过了简单粗暴,围绕出啥错,为什么,怎么解决三点开始正文错误:ERROR1148:TheusedcommandisnotallowedwiththisM
Wesley13 Wesley13
3年前
Oracle使用实例:创建只读用户
Oracle使用实例:创建只读用户原创L.Lawliet发布于2017080419:02:36阅读数12529收藏展开场景:数据库dbtest(服务名)下,创建reader只读用户访问查询scott普通用户下的表及数据   这里先只介绍使用命令操作的一种方法1\.管理员权限登陆sqlplus打开cmd,登陆方法
Wesley13 Wesley13
3年前
C#中怎样连接数据库并将查询结果转为实体类以及如何加入事务
场景新建一个程序,需要对数据的表进行查询并将查询结果转换为实体类,然后将多个实体类再插入到另一个数据库的表中,执行插入的过程中要使用事务。注:博客主页:https://blog.csdn.net/badao\_liumang\_qizhi(https://www.oschina.net/action/GoToLink?url
Stella981 Stella981
3年前
RoadFlow ASP.NET Core工作流快速入门
RoadFlow新建一个流程分为以下几步:1、建表   在数据库建一张自己的业务表(根据你自己的业务需要确定表字段,如请假流程就有,请假人、请假时间、请假天数等字段),数据表必须要有一个主键,主键类型是(int自增,或者guid(uniqueidentifier)类型)。    !image.png(http://www.r
Stella981 Stella981
3年前
Dubbo 负载均衡的实现
!(https://oscimg.oschina.net/oscnet/up05fdf662c6edbce3df477a1fc6d5818d3af.png)前言负载均衡是指在集群中,将多个数据请求分散在不同单元上进行执行,主要为了提高系统容错能力和加强系统对数据的处理能力。在Dubbo中,一次服务的调用就是对所有实体域Inv