推荐
专栏
教程
课程
飞鹅
本次共找到3796条
spark源码分析
相关的信息
Wesley13
•
3年前
SOFA 源码分析— 自定义路由寻址
!(https://oscimg.oschina.net/oscnet/a53072c91815c9369fa3822fec65defbc2b.png)前言SOFARPC中对服务地址的选择也抽象为了一条处理链,由每一个Router进行处理。同Filter一样,SOFARPC对Router提供了同样的扩展能力。那么就
Stella981
•
3年前
Hive on Spark参数调优姿势小结
前言HiveonSpark是指使用Spark替代传统MapReduce作为Hive的执行引擎,在HIVE7292提出。HiveonSpark的效率比onMR要高不少,但是也需要合理调整参数才能最大化性能,本文简单列举一些调优项。为了符合实际情况,Spark也采用onYARN部署方式来说明。!(https://imgcon
Stella981
•
3年前
Ignite 与 Spark 都很强,那如果把它们整合起来会怎样?
在前面的文章(https://my.oschina.net/editorialstory/blog/2050881)中,我们分别介绍了Ignite和Spark这两种技术,从功能上对两者进行了全面深入的对比。经过分析,可以得出这样一个结论:两者都很强大,但是差别很大,定位不同,因此会有不同的适用领域。但是,这两种技术也是可以互补的,那么它们互
Stella981
•
3年前
Django 基于类的视图源码分析 一
基于类的视图(Classbasedview)是Django1.3引入的新的视图编写方式,用于取代以前基于函数(Functionbased)方式。借助于OO和Python中方便的多重继承特性,基于类的视图可以提供更好的抽象与复用能力。新的通用视图将更加优雅。Django的文档较为丰富,但在实际开发中往往仍显得不够,很多时候还是需要深入到源代码当
Stella981
•
3年前
Redis缓存总结:淘汰机制、缓存雪崩、数据不一致....
越努力,越幸运,本文已收藏在Gitee中JavaCommunity(https://gitee.com/JavaCommunity/JavaCommunity),里面有面试分享、源码分析系列文章,欢迎收藏,点赞https://gitee.com/JavaCommunity/JavaCommunity(https://gite
Wesley13
•
3年前
MySQL查询性能优化前,必须先掌握MySQL索引理论
越努力,越幸运,本文已收藏在Gitee中JavaCommunity(https://gitee.com/JavaCommunity/JavaCommunity),里面有面试分享、源码分析系列文章,欢迎收藏,点赞https://gitee.com/JavaCommunity/JavaCommunity(https://gite
Stella981
•
3年前
Spark2.3.1在Idea控制台调整日志等级
Spark2.3.1在Idea控制台输出Spark2.3.1在Idea控制台输出时默认会打印INFO级别日志信息,在调试代码时会觉得日志太多,需要有方法调整输出的日志级别,只输出关注的日志即可调整控制台日志输出级别importorg.apache.log4j
京东云开发者
•
1年前
spark为什么比mapreduce快?
spark为什么比mapreduce快?首先澄清几个误区:1:两者都是基于内存计算的,任何计算框架都肯定是基于内存的,所以网上说的spark是基于内存计算所以快,显然是错误的2;DAG计算模型减少的是磁盘I/O次数(相比于mapreduce计算模型而言),
京东云开发者
•
9个月前
spark为什么比mapreduce快?
spark为什么比mapreduce快?首先澄清几个误区:1:两者都是基于内存计算的,任何计算框架都肯定是基于内存的,所以网上说的spark是基于内存计算所以快,显然是错误的2;DAG计算模型减少的是磁盘I/O次数(相比于mapreduce计算模型而言),
1
•••
21
22
23
•••
380