个推分享Spark性能调优指南:性能提升60%↑ 成本降低50%↓
前言Spark是目前主流的大数据计算引擎,功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作,应用范围与前景非常广泛。作为一种内存计算框架,Spark运算速度快,并能够满足UDF、大小表Join、多路输出等多样化的数据计算和处理需求。作为国内专业的数据智能服务商,个推从早期的1.3版本便引入Spark,
Wesley13 Wesley13
3年前
2015移动应用创新大会暨APP展览会
专注于移动应用领域的行业盛会,2015移动应用创新大会暨APP展览会,将于2015年12月2日3日在上海举办。本届大会将全面引领移动应用行业的发展走向,汇聚来自国际、国内紧跟潮流的移动应用产品及创新技术;集中展示涵盖:资讯娱乐、商务办公、健康医疗、社交出行、生活服务、电商支付等领域,大会致力于推动移动应用产业的深层次拓展,励志成为中国最前沿、最专业的
Wesley13 Wesley13
3年前
RCS市场空间或超1500亿,三大运营商5G消息商用落地进入快车道
日前,“GSMAThrive·万物生晖RCS5G消息论坛”传来消息,三大运营商均已启动5G消息商业化平台建设。中国电信研究院移动通信研究所所长王庆扬表示,传统短信升级为RCS消息后,其生命力将进一步增强,市场空间扩大,预计到2021年RCS的市场空间可能会大于1500亿美元作为服务形态的全面改革,5G消息值得期待。
Stella981 Stella981
3年前
Follower to Leader,阿里云数据库都做了什么?
由于业务飞速发展,亚马逊和阿里两位电商巨头在10年前开始了自己的去“O”(Oracle数据库)运动,一直以来阿里云在数据库方面被认为是AWS跟随者,如今已经基本做到与AWS持平,甚至在某些方面已经领先。根据Gartner统计,阿里云已经位居全球云数据库市场份额前三,年增速在115%。同期AWS增速为74%,Oracle为66%。而POLARDB在201
Wesley13 Wesley13
3年前
MongoDB经典故障系列六:CPU利用率太高怎么办?
每逢电商大促,全民狂欢,但热闹是属于疯狂剁手的人们。而开发者们有的缺是“高流量、高访问、高并发”三高下带来的种种问题。为了应对大促期间的高I/O情况,企业会选择MongoDB云数据库应对。可是,在使用MongoDB云数据库的时候,可能经常遇到一个问题:MongoDBCPU利用率很高,都快跑满了,这该怎么办?别担心,我们有菊长呢。你看,菊长来了…!(
Wesley13 Wesley13
3年前
Uber的Ringpop和Riak
Uber是最流行的按需用车服务商,他们的创新远不止这些,在生活方式和物流等方面有着快速的进步,最近他们的架构师分享了一些最具有魅力的分布式架构。其中一个不断在进化的分布式系统项目是Ringpop:Ringpop是一个开源的Node.js库,能够在应用级别实现他们的调度平台服务的水平分区sharding。这个额外的抽象层框架,通过众多
Stella981 Stella981
3年前
RabbitMQ实现即时通讯居然如此简单!连后端代码都省得写了?
摘要有时候我们的项目中会用到即时通讯功能,比如电商系统中的客服聊天功能,还有在支付过程中,当用户支付成功后,第三方支付服务会回调我们的回调接口,此时我们需要通知前端支付成功。最近发现RabbitMQ可以很方便的实现即时通讯功能,如果你没有特殊的业务需求,甚至可以不写后端代码,今天给大家讲讲如何使用RabbitMQ来实现即时通讯!MQ
Stella981 Stella981
3年前
Larry Connors拉里·康纳斯 RSI2均值回归策略
由来From我的好朋友燃哥去年曾多次问过我,能不能写一种日内策略。也有很多朋友来问我,要求写一个网格、做市商策略。但我一般都直接回绝了,关于这些策略,首先你要有很强的数学功底,起码得有一个数学博士。另外高频量化比的更是财力,比如说资金量和宽带网速等等。最重要的是这些违背了我对交易的理解。那有没有其他办法可以做高频交
Easter79 Easter79
3年前
TWaver 3D 编辑器的使用(一)----设计3D场景以及数据绑定
TWaver提供了一套3D场景的开发包,用来帮助用户快速搭建3D场景,实现3D的监控系统。这个开发包目前商推的只有Flex框架下的版本,被称为TWaver3DforFlex。开发包提供简单的API,用户向TWaver的数据对象(例如Node)中设定相关的3Dstyle,就可以构建出一套3D场景。(详细的使用方式请参考产品包中的为了简化用户使用代码
十月飞翔 十月飞翔
2年前
解决数据库高并发访问瓶颈问题
一、缓存式的Web应用程序架构:  在Web层和db层之间加一层cache层,主要目的:减少数据库读取负担,提高数据读取速度。cache存取的媒介是内存,可以考虑采用分布式的cache层,这样更容易破除内存容量的限制,同时增加了灵活性。二、业务拆分:  电商平台,包含了用户、商品、评价、订单等几大模块,最简单的做法就是在一个数据库中分别创建users、sh