亚马逊分布式区块链技术,助力在数字社会的应用
AmazonManagedBlockchain是一个完全托管的服务,它允许您使用流行的开源框架HyperledgerFabric和Ethereum轻松加入公共网络或创建和管理可扩展的私有网络。亚马逊是一项完全托管的服务,只需点击几下鼠标,您就可以加入公共网络或设置和管理可扩展的专用网络。AmazonManagedBlockchain节省了创建网络或
Stella981 Stella981
4年前
Raft 算法在分布式存储系统 Curve 中的实践
作为网易数帆开源的高性能、高可用、高可靠的新一代分布式存储系统,Curve对于多副本数据同步、负载均衡、容灾恢复方面都有较高的要求。网易数帆存储团队选用Raft算法作为Curve底层一致性协议,并基于Raft的特性,实现了异常情况下的数据迁移和自动恢复。本文首先简要介绍一下Raft算法的一些基本概念和术语,再详细介绍其在Curve中的实践。Raft一致性
Stella981 Stella981
4年前
PingCAP 开源分布式数据库 TiDB 论文入选 VLDB
8月31日9月4日,第46届VLDB会议以线上直播的方式举行(原定于日本东京召开),PingCAP团队的论文《TiDB:ARaftbasedHTAPDatabase》入选VLDB2020,成为业界第一篇RealtimeHTAP分布式数据库工业实现的论文。PingCAP联合创始人、CTO黄东旭获邀在会上
Wesley13 Wesley13
4年前
MySQL分布式架构扩缩容的初步设计(二)
这是学习笔记的第1834篇文章之前总结了一篇扩缩容的初步设计,我们来做第二篇。MySQL分布式架构扩缩容的初步设计(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fmp.weixin.qq.com%2Fs%3F__biz%3DMjM5ODEzNDA4OA%3D%3D
Wesley13 Wesley13
4年前
Uber工程团队的开源分布式追踪系统Jaeger(java实现)
jaeger介绍(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Fwww.infoq.com%2Fcn%2Farticles%2Fevolvingdistributedtracingatuberengineering)一、springboot客户端1、在springb
Easter79 Easter79
4年前
SpringSecurity 整合SpringBoot结合jwt与rsa实现分布式认证授权
基于springsecurity整合springboot实现简单认证授权(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.cnblogs.com%2Fifme%2Fp%2F12184433.html)进行修改实现分布式认证,即我们常说的单点登录,简称SSO,指的是在多应用系统
Wesley13 Wesley13
4年前
Java服务使用Redis实现分布式全局唯一标识
此处以SpringBoot为例,示范如何使用Redis构造全局唯一标识.1\.RedisTemplate配置spring.redis.database0spring.redis.hostspring.redis.port6379spring.
Wesley13 Wesley13
4年前
Java集群优化——dubbo+zookeeper构建高可用分布式集群
不久前,我们讨论过Nginxtomcat组成的集群,这已经是非常灵活的集群技术,但是当我们的系统遇到更大的瓶颈,全部应用的单点服务器已经不能满足我们的需求,这时,我们要考虑另外一种,我们熟悉的内容,就是分布式,而当下流行的Dubbo框架,不容我们忽视,这里,咱们一起来探讨一下这个框架的使用。一,背景  以前我们需要远程调用他人的接口,我们是这么
python如何分布式和高并发爬取电商数据
随着互联网的发展和数据量的不断增加,网络爬虫已经成为了一项非常重要的工作。爬虫技术可以帮助人们自动地从互联网上获取大量数据,并且这些数据可以应用于各种领域,如搜索引擎、数据分析和预测等。然而,在实际应用中,我们面临的一大难题就是如何高效地爬取大量数据。分布
小白学大数据 小白学大数据
1个月前
Scrapy 框架实战:构建高效的快看漫画分布式爬虫
一、Scrapy框架概述Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架,它提供了强大的数据提取能力、灵活的扩展机制以及高效的异步处理性能。其核心架构包括:●Engine:控制所有组件之间的数据流,当某个动作发生时触发事件●Schedul