clickhouse 数据一致性保障常用解决方案

一、前言

对于任何一个数据存储的框架来说,确保数据的一致性都是其非常重要的组成部分,不管是过程中的强一致性,还是最终一致性,都是数据一致性的解决方案,本篇来聊聊clickhouse中的数据一致性问题。

二、clickhouse 数据一致性

通过查询 CK 官方手册发现,即便对数据一致性支持最好的 Mergetree,也只是保证最终一致性,即clickhouse是采用最终一致性的解决方案;

三、前置准备

1、创建一张数据表

CREATE TABLE test_a(
 user_id UInt64,
 score String,
 deleted UInt8 DEFAULT 0,
 create_time DateTime DEFAULT toDateTime(0)
)ENGINE= ReplacingMergeTree(create_time)
ORDER BY user_id;

表字段说明:

  • user_id 是数据去重更新的标识;
  • create_time 是版本号字段,每组数据中 create_time 最大的一行表示最新的数据;
  • deleted 是自定的一个标记位,比如 0 代表未删除,1 代表删除数据;

扫描二维码关注公众号,回复: 14609577 查看本文章

猜你喜欢

转载自blog.csdn.net/congge_study/article/details/128275901