分布式架构 - 主题 - twt企业IT交流平台

文章
热度排序 时间排序

数据库·2023-03-26

左右互搏还是互补：Google云数据库AlloyDB与Spanner的差异与定位

10 会员关注

摘要：随着对传统数据库扩展性、成本等方面的不满以及自主可控的需要，数据库替代成为热点。原本大家希望有一种终极架构能满足所有需求，并对分布式数据库给予厚望，但真的有绝对先进的架构可以做到这点吗？我们借Google正式推出AlloyDB从而在架构上脚踩两船的事来分析下这一问题...(more)

赞同1

专栏：趋势观点

分布式架构·2023-02-24

一文搞懂 Redis 分布式锁

Luga Lee · None　擅长领域：云计算, 容器, 容器云

46 会员关注

在实际的项目开发过程中，许多业务场景都使用基于Redis进行分布式锁的实现，但其中一些场景的实现过程中往往并没有充分考虑到分布式环境中可能出现的各种陷阱问题～什么是“锁”？通常来讲，我们可以这样定义，即，锁是多个线程检查是否允许访问资源的单一参考点。因此，例如，如果一个线...(more)

赞同3

分布式架构·2023-02-17

企业基于集中交换模式的信息系统服务网格化实践

沉默的海 · 某金融单位　擅长领域：系统运维, 服务器, 自动化测试

1 会员关注

一、背景传统的企业信息系统体系多采用集中交换架构，它结构简单，部署方便，但故障容错能力及弹性扩展能力不足。随着业务的不断发展，用户增加，并发访问量和交易量呈爆发式增长，业务逐渐精细化拆分，业务需求更明确更专业，对业务需求的响应更敏捷，传统的集中式架构无法满足我们的业务...(more)

赞同3

专栏：最佳实践

分布式存储·2022-12-27

大数据湖仓一体架构对分布式存储的技术需求

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

随着云计算、大数据的快速发展，数据体量急速增长，与之相应，数据管理技术也在快速演进，其中，就包括湖仓一体（Lakehouse）技术。在咨询公司Gartner发布的“数据管理技术成熟度曲线”中，湖仓一体技术处于高速发展阶段。按照云计算提供商亚马逊的定义，湖仓一体是一种新的数据管理模式，它...(more)

赞同3

分布式存储·2022-12-25

分布式存储的数据可靠性估计 - 简单计算法

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

本文介绍分布式存储数据可靠性的一种简单估计方法。如前文所述，在分布式存储系统中，为防止因为单点失效（单个硬盘、单个存储节点等）造成数据丢失，一般采用一定的数据冗余策略（多副本、纠删码等）来提升数据可靠性。以三副本为例，数据在写入分布式存储系统时，会被切割成固定长度的数...(more)

赞同2

分布式存储·2022-12-25

分布式存储的数据可靠性估计 - 模特卡罗法

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

存储系统的数据可靠性是指在给定的时间（一般取一年）内数据不丢失的概率。利用分布式方法存储的数据，一般可以达到比较高的数据可靠性。比如，亚马逊S3存储服务的数据可靠性指标是11个9，也就是99.999999999%。照此计算，用户存储百亿对象，平均十年可能出现1个对象丢失。对存储系统...(more)

赞同1

分布式存储·2022-12-19

分布式存储系统概述（三）

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

（接上篇）五、数据存储效率随着数据量的高速增长，所需存储设备的空间越来越大。如何在固定的存储物理空间上存储更多的数据，就是数据存储效率问题。需要说明的是，高效的数据存储不能损害数据可靠性。常见的提升数据存储效率的方法包括精简配置、RAID/EC（Erasurecoding）、重删、压...(more)

赞同4

分布式存储·2022-12-19

分布式存储系统概述（二）

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

（接上篇）四、IO性能对于存储系统，经常用IOPS（I/Opersecond）、带宽（Throughput）、时延（Latency）这三个参数作为性能衡量指标。IOPS指的是系统在单位时间（1秒）内能处理的最大的I/O数量。把IOPS的值乘以IO尺寸，就得到了带宽指标。所以说，IOPS和带宽不是两个独立的指标。那为什么人们为什...(more)

赞同1

分布式存储·2022-12-19

分布式存储系统概述（一）

xianghezhang · 新华三技术有限公司　擅长领域：存储, 服务器, 灾备

5 会员关注

本文对分布式存储系统的一些基本问题作一简要描述，以期对希望了解分布式存储基本概念的读者有所帮助。#一、内容总括分布式存储系统是基于分布式架构，由多个软硬件协同的存储节点通过网络互联来提供存储服务的系统。或简言之，分布式存储系统使用分布式的方法来提供存储服务...(more)

赞同1

GPFS·2022-11-30

中小银行文件共享需求GPFS迁移华为企业NAS实践分享

zhangjunxi570 · 某城商银行　擅长领域：存储, 灾备, 分布式系统

8 会员关注

文章摘要本文介绍了文件共享需求场景下中小银行由GPFS迁移华为企业级NAS的实践经验。GPFS作为金融企业广泛采用的文件共享解决方案，数年来很好地支撑了某城商行业务的发展。但由于虚拟化环境部署的特殊性，以及GPFS维护管理相对的复杂性，行内决定以华为企业级NAS替换GPFS，华为...(more)

赞同8

专栏：最佳实践

描述

分布式架构是运行在多个处理器上的软件构架设计。正是因为软件的特性，所以分布式系统具有高度的内聚性和透明性。因此，网络和分布式系统之间的区别更多的在于高层软件（特别是操作系统），而不是硬件。内聚性是指每一个数据库分布节点高度自治，有本地的数据库管理系统。透明性是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。...(more)

462 会员关注

571 会员贡献

43 关系主题