数据同步
数据同步
数据同步的存在是因为计算机在存储数据的的时候,不同的存储介质读写效率有较大差别,所以缓存的设计被大多数计算机系统采用。存在缓存机制的计算机,在写入数据的时候,系统不会立即将数据写入读写速度慢的存储介质中(如外存),而是保存在读写速度快的存储介质中(如内存);在读取数据的时候,系统会查看读写速度快的存储介质中是否有该数据的备份,如果有则可以直接读取这个备份。这样系统可...(more)
数据同步的存在是因为计算机在存储数据的的时候,不同的存储介质读写效率有较大差别,所以缓存的设计被大多数计算机系统采用。存在缓存机制的计算机,在写入数据的时候,系统不会立即将数据写入读写速度慢的存储介质中(如外存),而是保存在读写速度快的存储介质中(如内存);在读取数据的时候,系统会查看读写速度快的存储介质中是否有该数据的备份,如果有则可以直接读取这个备份。这样系统可以减少对外存的访问,大大提高系统性能。

热点

互联网服务PostgreSQL·2023-02-01
arzee86 · 暨南大学附属第一医院 擅长领域:数据库, 安全, 数据安全
6 会员关注
常见的多活方案有同城双活、两地三中心、三地五中心、异地多活等多种技术方案,不同多活方案技术要求、建设成本、运维成本都不一样,下面我们会逐步介绍这几种多活方案并给出每种方案的优点和缺点。选用哪种方案要结合具体业务规模、当前基础建设能力、投入产出比等多种因素...
银行分布式数据库·2022-03-18
hanfeng_twt · SphereEx 擅长领域:数据库, 服务器, 分布式系统
70 会员关注
NewSQL的同步,主要看其架构:1.基于分库分表架构,一般较难提供全局CDC能力,只能通过底层数据节点的数据同步,无法满足全局一致性要求,有一定缺陷。2.基于原生分布式架构,一般可提供CDC能力(如TiDB),可满足上述需求。...
保险分布式数据库·2021-12-22
hanfeng_twt · SphereEx 擅长领域:数据库, 服务器, 分布式系统
70 会员关注
租户隔离能力,是数据库产品能力之一。这一特点,各厂商实现功能差异很大,这一点需要评估。
银行分布式数据库·2021-12-23
luxh08 · 某互联网银行 擅长领域:数据库, 分布式系统, 服务器
12 会员关注
分布式数据库大部分要考虑下面部分的调用延时,二阶段协商、多副本同步、时钟调用,通过架构设计、业务纬度分离、或者数据库策略减少夸机房的上述调用
银行容器云·2021-12-07
zhanxuechao · 数字研究院 擅长领域:云计算, 数据库, 安全
45 会员关注
有如下几个方案吧:首推FlinkCDC其次就是比较典型的:mysql的binlog -> Canal -> Kafka -> Flink/Spark -> Hive/KuduOracle的redolog -> Ogg -> Kafka -> Flink/Spark -> Hive/Kudu
保险数据同步·2021-09-17
kevinshopping · 某保险有限公司 擅长领域:灾备, 存储, 异地容灾
5 会员关注
广域网高延时说明数据传输已经达到了带宽峰值,建议针对同步数据大小进行评估,然后根据RTO和RPO目标进行带宽评估,该扩容带宽就得扩容带宽。坏块问题非容灾同步也会存在不可避免,需要定期对备份数据和容灾数据进行数据验证,验证数据可用性。...
保险非结构化数据存储·2021-09-17
kevinshopping · 某保险有限公司 擅长领域:灾备, 存储, 异地容灾
5 会员关注
该问题建议从2个方面考虑:1、在灾备中心规划设计的时候需要对现有业务进行应用配置、应用变更频率、数据全量/增量及数据库日志变化量进行调研,确认从生产中心需要向灾备中心同步传输的总体数据量,然后根据RPO进行传输带宽计算,这样才能保证在目标时间内可完成所有数据的传输...
保险数据同步·2021-09-02
Macso · 光大科技有限公司 擅长领域:云计算, 容器云, 容器
1 会员关注
个人观点:1.日志数据,可使用ES的CCR  2.数据库相关,可以通过工具之间的主从同步机制  3.共享存储盘
互联网服务数据同步·2021-07-27
haizdl · 大连 擅长领域:灾备, 存储, 服务器
1232 会员关注
这个要回到数据复制的原理上来看。1. 基于镜像技术实现的数据复制技术(无论是基于系统层还是存储层)以及基于存储本身Block Copy的技术实现的数据复制技术,都存在逻辑Block错误传导的问题。也就是说一旦发生存储Block错误,那么它一定会传导到备数据中心。本质上是因为这种...
银行分布式存储·2021-07-20
haizdl · 大连 擅长领域:灾备, 存储, 服务器
1232 会员关注
数据异步复制的时间差问题取决于很多因素:1. 数据同步的原理机制;2. 数据同步的控制参数;3. 网络条件;4. 数据库本身的读写量特点。所以需要根据以上几个条件去判断,不是单单靠分布式或者集中式就能判断的了。...

描述

数据同步的存在是因为计算机在存储数据的的时候,不同的存储介质读写效率有较大差别,所以缓存的设计被大多数计算机系统采用。存在缓存机制的计算机,在写入数据的时候,系统不会立即将数据写入读写速度慢的存储介质中(如外存),而是保存在读写速度快的存储介质中(如内存);在读取数据的时候,系统会查看读写速度快的存储介质中是否有该数据的备份,如果有则可以直接读取这个备份。这样系统可...(more)
数据同步的存在是因为计算机在存储数据的的时候,不同的存储介质读写效率有较大差别,所以缓存的设计被大多数计算机系统采用。存在缓存机制的计算机,在写入数据的时候,系统不会立即将数据写入读写速度慢的存储介质中(如外存),而是保存在读写速度快的存储介质中(如内存);在读取数据的时候,系统会查看读写速度快的存储介质中是否有该数据的备份,如果有则可以直接读取这个备份。这样系统可以减少对外存的访问,大大提高系统性能。
X社区推广
  • 提问题