数据存储“取经路”,HBlock轻松“渡”!

天翼云开发者社区
• 阅读 69

近日,天翼云联合权威科技媒体InfoQ举办了以“新存储,更轻量”为主题的线上技术分享会。天翼云存储产品线总监武志民讲解了HBlock的创新设计和技术。

高性能·高可用·高可靠 自研创新解决存储技术难题

天翼云自主研发的业内首款存储资源盘活系统HBlock能够与底层基础设施完全解耦,同服务器上现网业务并存,将x86、ARM、龙芯等异构通用服务器中的存储资源统一管理,通过标准的iSCSI协议提供分布式块存储服务。

在性能方面,HBlock单卷IOPS可达15万次、读写延迟小于200微秒,这要归功于自研的分布式多控架构和智能调度算法,以及多模式写缓存与读缓存的设计。写缓存方面,HBlock具有三种模式,可以根据不同场景的读写需求动态调整。读缓存方面,HBlock采用按需更新、分段加锁、高效淘汰算法和智能预读器等多重机制,提升内存利用率、提高缓存命中率,并优化高并发场景下的数据访问性能。

数据存储“取经路”,HBlock轻松“渡”! HBlock的缓存设计

HBlock通过多重机制确保高可用性:采用一主多备架构,无需外部时钟服务器,实现秒级故障切换,保证数据一致性和无丢失;优化写入速度,在存储紧张时平滑降速,避免业务中断,并通过限速管理内存和重构操作,确保在高负载下稳定运行。

HBlock独创的副本折叠技术允许在一个故障域放多个副本来提高小规模集群的数据高可靠性。例如,只有三个故障域时,可以每个故障域放置两个副本,将EC2+1扩展为EC4+2,得盘率不变的情况下显著提升数据的容错能力,在扩容时,HBlock可智能调整数据分布,以最大化故障域的利用。

数据存储“取经路”,HBlock轻松“渡”! HBlock的副本折叠设计

HBlock通过创新设计,全面解决了存储系统中的种种难题,真正实现了“高性能·高可用·高可靠”的卓越存储解决方案。

低门槛·巧分配·超灵活 轻量设计定义存储未来形态

HBlock使用门槛极低,安装包只有170MB左右,1核4GB内存即可部署,可安装在任何主流Linux操作系统上,3个命令即可完成安装,3分钟建立数据中心级别集群,轻松发挥硬件资源的全部潜力。

HBlock的独特的存储引擎设计,可将元数据和数据分配到最佳位置,实现系统轻量化。

数据存储“取经路”,HBlock轻松“渡”! HBlock多级元数据管理

首先,HBlock设计了一级索引(记录iSCSI卷逻辑地址与数据位置)、二级索引(汇总一级索引,提高查询效率)和三级索引(记录集群内数据分布,缓存中存储,快速定位数据)的多级索引架构。其次,索引缓存机制优化了数据访问,通过逐级访问减少对元数据服务的依赖。第三,元数据持久化采用与数据相同的保护方式,确保数据和索引的容错能力。最后,HBlock支持轻量化混合部署,仅需三个节点即可完成元数据、iSCSI和数据服务的部署,充分利用硬件资源。

HBlock灵活的多存储池功能可以充分发挥硬件潜力,可统一管理不同规格的硬件设备,根据性能和容量创建多种存储池,例如SSD高性能池和HDD容量池,也可创建跨节点高速缓存池,提高资源共享效率。

HBlock将轻量化与高效能相结合,彻底革新了存储的部署和管理方式,重新定义了未来存储系统的形态。

HBlock凭借卓越的创新设计和技术实现,不仅解决了存储系统中的性能、可用性和可靠性难题,更开创了存储新纪元,重新定义了分布式存储的未来形态。未来,HBlock将持续推动行业进步,为各行各业的数字化转型注入动力,释放数据的巨大潜能,为创新应用场景的实现提供坚实基础,助力企业开启更广阔的数字化发展新篇章。

天翼云HBlock众测活动火热进行中

为了让“轻量存储”走进更多企业,InfoQ和天翼云联合举办“HBlock有奖众测活动”,欢迎广大存储Geek踊跃报名,深度体验轻量存储带来的不一样,将使用心得发布在InfoQ写作社区,即可参与评选并获得丰厚礼品! 数据存储“取经路”,HBlock轻松“渡”!

点赞
收藏
评论区
推荐文章
Web3.0时代来了,看天翼云存储资源盘活系统如何赋能新基建!(下)
互联网形态正加速向Web3.0迭代发展,但风险和挑战也随之而来。从上篇《,我们了解到Web3.0时代基础设施建设的六大难题,那么天翼云存储资源盘活系统是如何解决的呢?天翼云存储资源盘活系统是纯软件的存储控制器,能够安装在任意Linux服务器上,可以把各服务器中分散的磁盘整合成高性能的存储资源池,通过分布式双控制器架构保证了系统的低延迟、高可用、易拓展;通过完
盘活存储资源,天翼云HBlock助力企业绿色高效发展!
2023年3月10日,由百易传媒(DOIT)主办、上海市计算机学会与上海交通大学支持的第六届分布式存储高峰论坛在线上成功举办。存储资源盘活系统荣获“2023分布式存储产品金奖”,天翼云国际业务事业部解决方案架构师王琢在会上介绍了HBlock存储资源盘活系统
云平台监控指标的设定
本文分享自天翼云开发者社区@《》,作者:AE86上山了为了确保存储和服务器能应付不断增长的业务需求,对磁盘资源、内存和CPU资源、宿主操作系统进行监控是必要的。1.磁盘资源服务器硬盘是磁盘资源中最慢的组件,在企业数据中心,仔细设计存储子系统,不要让它成为主
云电脑架构设计的层次
云电脑架构设计的层次基础设施层是云电脑架构的最底层,负责提供计算、存储、网络等基础设施。这些基础设施可以由多个服务器组成,通过虚拟化技术进行资源池化,实现资源的动态分配和共享。基础设施层需要提供足够的计算、存储和网络资源,以满足虚拟化层和应用层的资源需求。同时,基础设施层还需要具备高可用性、可扩展性和安全性等特点,以满足用户的需求和保障数据安全。
玩转云端 | 拥有HBlock这项“存储盘活绝技”,数据中心也能“热辣瘦身”!
如何让数据中心“热辣瘦身”?轻量级存储集群控制器——天翼云存储资源盘活系统HBlock必不可少!
让存储绿“翼”盎然,天翼云HBlock入选工信部目录!
近日,中国电信天翼云的自研产品HBlock凭借“存储资源盘活技术”成功入选《国家工业和信息化领域节能降碳技术装备推荐目录(2024年版)》(以下简称《目录》),这一成绩是对中国电信天翼云以科技创新赋能千行百业绿色低碳发展的认可。存储资源盘活技术作为该目录唯一的存储软件技术,能够快速整合现网资源,大幅提升基础设施资源利用率,同时具备轻量、绿色、灵活、共生等优势,助力企业实现节能降碳和降本增效,为数据中心绿色转型提供技术保障。
应对高温“烤”验,数据中心降温奇招来了!
近日,中国电子学会联合中国电子技术标准化研究院等单位,在安徽省合肥市举办“节能服务进企业”暨绿色数据中心对接推广活动。会议为天翼云存储资源盘活系统HBlock入选《国家工业和信息化领域节能降碳技术装备推荐目录(2024年版)》颁发荣誉证书;天翼云存储产品专家肖夏敏发表演讲,向业界展示了HBlock在绿色节能方面的落地实践。
一招致胜!天翼云对象存储攻克数据存、管、用难题!
天翼云对象存储(CTZOS,ZettabyteObjectStorage)是一款海量、弹性、高可靠、高性价比的存储产品,也是专门针对云计算、大数据和非结构化数据的海量存储形态,通过S3协议和标准的服务接口,提供图片、音视频、文本等非结构化数据的云存储服务,助力企业高效应对数据存储挑战。
从理念到实践,解构HBlock降本增效黑科技!
天翼云存储资源盘活系统HBlock2024年线上技术分享会来啦!
这是一款轻量存储黑科技!
近日,天翼云联合InfoQ举办了以“新存储,更轻量”为主题的线上技术分享会。天翼云存储产品线总监潘亚莲以“轻量级存储集群控制器HBlock的设计理念与场景实践”为主题,讲解了HBlock在产品理念、价值主张、应用场景等方面的内容。
天翼云开发者社区
天翼云开发者社区
Lv1
天翼云是中国电信倾力打造的云服务品牌,致力于成为领先的云计算服务提供商。提供云主机、CDN、云电脑、大数据及AI等全线产品和场景化解决方案。
文章
649
粉丝
14
获赞
40