Cassandra 组件

时间：2020-01-03 10:30:19 阅读：81 评论：0 收藏：0 [点我收藏+]

标签：操作自动更新数据库表保留高版本 lsh 存储文件中 strategy

关键结构

node: 您在哪里存储数据。它是基本的数据库基础结构组件。
cluster: 一组用于存储数据的分布式节点。集群可以具有单个节点，单个数据中心或多个数据中心。
datacenter: 在群集内为复制目的一起配置的一组相关节点。数据中心可以是物理数据中心或虚拟数据中心。使用单独的数据中心可防止事务受到其他工作负载的影响并降低延迟。根据复制因素，可以将数据写入多个数据中心。数据中心绝不能跨越物理位置。
replication: 在多个节点上存储数据副本的过程。复制可确保可靠性和容错能力。副本数由复制因子设置。
commit log: 首先将所有数据写入提交日志以确保持久性。将所有数据刷新到SSTables之后，可以将其存档，删除或回收。
sstable: 排序的字符串表（SSTable）是一个不变的数据文件，数据库会定期向其写入内存表。SSTable仅被追加，并顺序存储在磁盘上，并为每个数据库表维护。
tombstone: 行中指示一列的标记将被删除。压缩期间，标记的列将被删除。
CQL Table: 表行获取的有序列的集合。一个表由列组成，并具有一个主键。

配置Cassandra的关键组件

Gossip: 对等通信协议，用于发现和共享有关Cassandra集群中其他节点的位置和状态信息。每个节点在本地保留八卦信息，以便在节点重新启动时立即使用。; 闲话是一种点对点通信协议，其中节点定期交换有关自己以及他们所知道的其他节点的状态信息。闲话过程每秒运行一次，并与集群中的其他三个节点交换状态消息。节点交换有关自己以及它们所闲聊的其他节点的信息，因此所有节点都可以快速了解集群中的所有其他节点。八卦消息具有版本，因此在八卦交换期间，较旧的信息将被特定节点的最新状态覆盖。; 为防止八卦通信出现问题，请确保对群集中的所有节点使用相同的种子节点列表。在节点首次启动时，在所有最关键的节点上将种子设置为相同。默认情况下，一个节点会记住在后续重启之间闲聊的其他节点。指定种子节点没有其他目的，只是为加入群集的新节点引导八卦过程。种子节点不是单点故障，在节点操作之外，它们在群集操作中也没有任何其他特殊目的。

注意：由于增加了维护并降低了八卦的性能，因此不建议将每个节点都设为种子节点。八卦优化并不严格，但建议使用较小的种子列表（每个数据中心大约三个节点）。

故障检测是一种从闲聊状态和历史记录本地确定系统中节点何时关闭或已恢复的方法。该卡珊德拉数据库使用此信息，以避免路由客户端请求不可达的节点只要有可能。（数据库还可以通过动态侦听避免路由到性能不佳的节点。）

闲话过程直接跟踪其他节点的状态（直接向其闲聊的节点）和间接跟踪其他节点的状态（围绕二手，第三手进行通讯的节点等等）。数据库没有使用固定的阈值来标记故障节点，而是使用权责发生制检测机制来计算每个节点的阈值。该阈值考虑了网络性能，工作量和历史条件。在八卦交换期间，每个节点都会维护一个滑动窗口，该窗口在群集中来自其他节点的八卦消息到达时间之间。

要调整故障检测器的灵敏度，请配置phi_convict_threshold属性。较低的值会增加无响应的节点将被标记为关闭的可能性。在大多数情况下，请使用默认值，但对于Amazon EC2，应将其增加到10或12（由于经常遇到网络拥塞）。在不稳定的网络环境中（有时为EC2），将该值提高到10或12有助于防止错误故障。不建议使用高于12且低于5的值。

节点故障可能是由各种原因引起的，例如硬件故障和网络中断。节点中断通常是短暂的，但可能会持续很长时间。由于节点中断很少表示永久离开集群，因此不会自动导致节点从环网中永久删除。其他节点将定期尝试与失败的节点重新建立联系，以查看它们是否已备份。要永久更改集群中节点的成员资格，必须显式在集群中添加或删除节点。

当节点在中断后重新联机时，可能会丢失对其维护的副本数据的写入。存在修复机制来恢复丢失的数据，例如提示的切换和使用nodetool修复的手动修复。中断的时间长短决定了使用哪种修复机制来使数据一致。
分区器: 分区程序将数据均匀分布在群集中的各个节点上，以实现负载平衡。; 具体而言，分区程序确定哪个节点接收一条数据的第一副本，以及如何在群集中的其他节点之间分配其他副本。每一行数据都由主键唯一标识，该主键可以与其分区键相同，但也可以包括其他群集列。分区程序是一个哈希函数，它从行的主键派生令牌。分区程序使用令牌值来确定集群中的哪些节点接收该行的副本。该Murmur3Partitioner是新的默认分区策略卡桑德拉集群和新集群在几乎所有情况下的正确选择。
复制因子: 复制是在多个节点上存储数据副本的过程。复制可确保可靠性和容错能力。副本数由复制因子设置。; 复制因子为1表示一个节点上每一行只有一个副本。复制因子2表示每行有两个副本，其中每个副本位于不同的节点上。所有副本都同样重要。没有主副本或主副本。您为每个数据中心定义复制因子。通常，将复制策略设置为大于1，但不超过集群中的节点数。
复制品放置策略: 复制策略确定要在其上放置副本的节点。数据的第一个副本就是第一个副本。它在任何意义上都不是唯一的。强烈建议将NetworkTopologyStrategy用于大多数部署，因为将来扩展需要时，可以轻松扩展到多个数据中心。; 创建键空间时，必须定义副本放置策略和所需的副本数。
snitch: snitch从节点的IP地址映射到物理和虚拟位置，例如机架和数据中心。Snitches通知数据库有关网络拓扑的信息，以便有效地路由请求，并允许数据库通过将机器分组到数据中心和机架中来分发副本。; 创建集群时，必须配置告密功能。所有告密针都使用动态侦听层，该侦听层可以监视性能并选择最佳的副本进行读取。该动态告密者是默认启用的，并推荐使用于大多数部署。在cassandra.yaml 配置文件中为每个节点配置动态侦听阈值。; 默认的SimpleSnitch不识别数据中心或机架信息。将其用于公共云中的单个数据中心部署或单个区域。建议将GossipingPropertyFileSnitch用于生产。它定义了节点的数据中心和机架，并使用八卦将该信息传播到其他节点。
cassandra.yaml配置文件: 用于配置集群的初始化属性，表的缓存参数，调整和资源利用的属性，超时设置，客户端连接，备份和安全性的主要配置文件。默认情况下，将节点配置为将其管理的数据存储在cassandra.yaml文件中设置的目录中。; 在生产集群部署中，DataStax建议将commitlog目录更改为与数据文件目录不同的磁盘驱动器。
系统键空间表属性: 您可以以编程方式或使用客户端应用程序（例如CQL Shell（cqlsh））在每个键空间或每个表的基础上设置存储配置属性。