詳解Cassandra0.7的配置文件 |
發(fā)布時間: 2012/9/3 17:40:45 |
Cassandra中所有的運(yùn)行配置都是在配置文件cassandra.yaml中進(jìn)行配置。 下面依次講解Cassandra中的配置項(xiàng): cluster_name 設(shè)置Cassandra集群的名稱。 在Cassandra集群中,每一臺服務(wù)器都必須具備相應(yīng)的集群的名稱。如果名稱不一致,則當(dāng)前Cassandra服務(wù)器無法加入集群。 initial_token Cassandra服務(wù)器的初始化Token值,這個值代表了Cassandra服務(wù)器在一致性哈希環(huán)中的位置。 當(dāng)Cassandra第一次啟動的時候,會從該配置項(xiàng)中讀取,如果留空,將隨機(jī)生成一個Token值。如果Cassandra不是第一次啟動,將從系統(tǒng)表中讀取該Token值。 auto_bootstrap 第一次啟動的時候,是否在加入Cassandra集群時從其他服務(wù)器獲取屬于本服務(wù)器的數(shù)據(jù)。 如果當(dāng)前Cassandra服務(wù)器不在seed配置選項(xiàng)中,并且是第一次啟動,將從Cassandra集群中其他服務(wù)器獲取屬于本服務(wù)器的數(shù)據(jù)。 hinted_handoff_enabled 是否開啟當(dāng)前Cassandra服務(wù)器的HINT操作。 如果開啟該功能,Cassandra服務(wù)器將緩存發(fā)送給暫時失效的其他Cassandra服務(wù)器的數(shù)據(jù),等待失效的服務(wù)器恢復(fù)后,再將緩存的數(shù)據(jù)發(fā)送給恢復(fù)的服務(wù)器。 authenticator 驗(yàn)證使用Cassandra的用戶是否合法,這是安全認(rèn)證的第一步。 Cassandra中定義了一系列驗(yàn)證用戶的策略,可以選擇的項(xiàng)為: 1.org.apache.cassandra.auth.AllowAllAuthenticator 所有的用戶都是合法的。 2.org.apache.cassandra.auth.SimpleAuthenticator 合法的用戶和對應(yīng)的密碼都在passwd.properties文件中定義。 authority 驗(yàn)證該用戶是否具備操作某一個Column Family的權(quán)限,這是安全認(rèn)證的第二步。 Cassandra中定義了一系列驗(yàn)證用戶權(quán)限的策略,可以選擇的項(xiàng)為: 1.org.apache.cassandra.auth.AllowAllAuthority 所有的用戶具備所有的權(quán)限。 2.org.apache.cassandra.auth.SimpleAuthority 合法的用戶和對應(yīng)的權(quán)限都在access.properties文件中定義。 partitioner Cassandra集群中數(shù)據(jù)分區(qū)的策略。 同一個Cassandra集群中的每一臺服務(wù)器中的該配置需要一致。 Cassandra中定義了一系列數(shù)據(jù)分區(qū)的策略,可以選擇的項(xiàng)為: 1.org.apache.cassandra.dht.RandomPartitioner 2.org.apache.cassandra.dht.ByteOrderedPartitioner 3.org.apache.cassandra.dht.OrderPreservingPartitioner 4.org.apache.cassandra.dht.CollatingOrderPreservingPartitioner data_file_directories SSTable文件在磁盤中的存儲位置。 這個選項(xiàng)可以設(shè)置多個值,即如果服務(wù)器具有多個磁盤,可以將這幾個磁盤都指定為存儲SSTable文件的位置。如果可能,可以考慮將data_file_directories和commitlog_directory設(shè)置在不同的磁盤中,這樣有利于分散整體系統(tǒng)的磁盤I/O的壓力。 commitlog_directory commitlog文件在磁盤中的存儲位置。 如果可能,可以考慮將data_file_directories和commitlog_directory設(shè)置在不同的磁盤中,這樣有利于分散整體系統(tǒng)的磁盤I/O的壓力。 saved_caches_directory 數(shù)據(jù)緩存文件在磁盤中的存儲位置。 commitlog_rotation_threshold_in_mb 每一個commitlog文件的大小。 commitlog_sync 記錄commitlog的方式。 可以選擇的項(xiàng)為: 1.periodic 周期記錄commitlog,每一次有數(shù)據(jù)更新都將操作commitlog。 2.batch 批量記錄commitlog,每一段時間內(nèi)數(shù)據(jù)的更新將批量一次操作commitlog。 commitlog_sync_period_in_ms 周期記錄commitlog時,刷新commitlog文件的時間間隔。這個選項(xiàng)只有在commitlog_sync= periodic時才能設(shè)置。 commitlog_sync_batch_window_in_ms 批量記錄commitlog時,批量操作緩存的時間間隔。這個選項(xiàng)只有在commitlog_sync= batch 時才能設(shè)置。 seeds Cassandra集群中的種子節(jié)點(diǎn)地址 這個選項(xiàng)可以設(shè)置多個值,即Cassandra集群中有多個種子節(jié)點(diǎn)。 集群中所有的服務(wù)器在啟動的時候,都將于seed節(jié)點(diǎn)進(jìn)行通信,從而獲取集群的相關(guān)信息。如果某一臺服務(wù)器被設(shè)置為seed節(jié)點(diǎn),那么在啟動的時候,將自動加入集群,并且不會執(zhí)行Bootstrap的操作,即無法從集群的其他節(jié)點(diǎn)中獲取相應(yīng)的數(shù)據(jù)。 disk_access_mode Cassandra訪問SSTable文件中的Data文件和Index文件時是否使用虛擬內(nèi)存映射的形式。 可以選擇的項(xiàng)為: 1.auto 自動選擇合適的文件訪問形式,如果是64位系統(tǒng),則為mmap形式,否則為standard形式。 2.mmap 訪問SSTable文件中的Data文件和Index文件時,都采用虛擬內(nèi)存映射的形式。 3.mmap_index_only 訪問SSTable文件中的Index文件時采用虛擬內(nèi)存映射的形式。 4.standard 訪問SSTable文件中的Data文件和Index文件時,都不采用虛擬內(nèi)存映射的形式。 使用虛擬內(nèi)存映射的形式訪問文件能夠加快對文件的讀寫速度,但是這是以消耗而外的內(nèi)存作為代價的。所以要根據(jù)實(shí)際內(nèi)存大小與文件大小來選擇合適的文件訪問方式。 concurrent_reads 并發(fā)讀取的線程數(shù)。 這個選項(xiàng)設(shè)置得越大,Cassandra在進(jìn)行讀取操作時可以使用的線程數(shù)就越多。推薦的配置為:CPU的個數(shù)*2。 concurrent_writes 并發(fā)寫入的線程數(shù)。 這個選項(xiàng)設(shè)置得越大,Cassandra在進(jìn)行寫入操作時可以使用的線程數(shù)就越多。 memtable_flush_writers memtable中的數(shù)據(jù)寫入到磁盤成為SSTable文件的并發(fā)數(shù)。 這個選項(xiàng)的默認(rèn)配置為data_file_directories中指定的目錄的個數(shù)。 sliced_buffer_size_in_kb 進(jìn)行范圍讀取操作時,讀取SSTable文件使用的緩存大小。 storage_port Cassandra集群中服務(wù)器與服務(wù)器之間相互通信的端口號。 listen_address Cassandra集群中服務(wù)器與服務(wù)器之間相互通信的地址。如果留空,將默認(rèn)使用服務(wù)器的機(jī)器名。 rpc_address Cassandra服務(wù)器對外提供服務(wù)的地址。如果留空,將默認(rèn)使用服務(wù)器的機(jī)器名。 rpc_port Cassandra服務(wù)器對外提供服務(wù)的端口號。 rpc_keepalive Cassandra服務(wù)器對外提供服務(wù)連接是否一直保持。 thrift_framed_transport_size_in_mb 使用Thrift Frame每次傳遞的數(shù)據(jù)大小。如果該選項(xiàng)為0,則禁用Thrift Frame。 thrift_max_message_length_in_mb 使用Thrift傳遞的數(shù)據(jù)最大值。 snapshot_before_compaction Cassandra在執(zhí)行數(shù)據(jù)壓縮操作前,是否對需要壓縮的SSTable文件做數(shù)據(jù)快照(snapshot)。 binary_memtable_throughput_in_mb binary memtable的緩存大小。 binary memtable用于大量數(shù)據(jù)的初始化操作。 column_index_size_in_kb SSTable文件中的Data文件對應(yīng)Column索引的數(shù)據(jù)大小間隔。如果這個值越小,在Column索引中找到相應(yīng)的值速度就越快,但是會消耗更多的內(nèi)存與磁盤空間。 in_memory_compaction_limit_in_mb 在Cassandra執(zhí)行數(shù)據(jù)壓縮時,如果某一個key對應(yīng)的數(shù)據(jù)的大小超過了in_memory_compaction_limit_in_mb的限制,將采用延后壓縮的機(jī)制進(jìn)行壓縮,避免使用過多的內(nèi)存。 rpc_timeout_in_ms 如果Cassandra服務(wù)器在處理外部請求的時候,如果超過了rpc_timeout_in_ms的限制,將拋出超時異常給調(diào)用的客戶端。 endpoint_snitch Cassandra集群中網(wǎng)絡(luò)的選擇策略。 Cassandra中定義了一系列網(wǎng)絡(luò)的選擇策略,可以選擇的項(xiàng)為: 1.org.apache.cassandra.locator.SimpleSnitch 2.org.apache.cassandra.locator.RackInferringSnitch 3.org.apache.cassandra.locator.PropertyFileSnitch dynamic_snitch 是否啟用動態(tài)的節(jié)點(diǎn)選擇策略。啟動該選項(xiàng)可以在做有效地避免相應(yīng)緩慢的節(jié)點(diǎn)。 和這個選項(xiàng)相關(guān)的其他選項(xiàng)為: dynamic_snitch_update_interval_in_ms dynamic_snitch_reset_interval_in_ms dynamic_snitch_badness_threshold request_scheduler 設(shè)置資源調(diào)度分配策略 Cassandra中定義了一系列網(wǎng)絡(luò)的選擇策略,可以選擇的項(xiàng)為: 1.org.apache.cassandra.scheduler.NoScheduler 所有的請求分配的計算資源都是均等的。 2.org.apache.cassandra.scheduler.RoundRobinScheduler 對不同的Keyspace分配不同的計算資源。 在多租戶的情況下適合使用RoundRobinScheduler。 index_interval SSTable文件中的Index文件對應(yīng)內(nèi)存索引的數(shù)據(jù)大小間隔。如果這個值越小,在內(nèi)存索引中找到相應(yīng)的值速度就越快,但是會消耗更多的內(nèi)存。 keyspaces 定義Keyspace的屬性。 name:定義keyspace的名稱。 replica_placement_strategy:定義數(shù)據(jù)的備份策略,可選的項(xiàng)為: 1.org.apache.cassandra.locator.SimpleStrategy 2.org.apache.cassandra.locator.OldNetworkTopologyStrategy 3.org.apache.cassandra.locator.NetworkTopologyStrategy 4.org.apache.cassandra.locator.LocalStrategy replication_factor:定義數(shù)據(jù)的備份數(shù)。 column_families:定義Column Family的屬性 column_type:定義Column Family的類型?梢栽O(shè)置為Super或者Standard,如果不設(shè)置,為Standard類型。 compare_with:Column名稱的排序規(guī)則?蛇x的項(xiàng)為: 1.AsciiType 2.UTF8Type 3.LexicalUUIDType 4.TimeUUIDType 5.LongType 6.IntegerType compare_subcolumns_with:SuperColumn下的Column名稱的排序規(guī)則?蛇x的項(xiàng)為: 1.AsciiType 2.UTF8Type 3.LexicalUUIDType 4.TimeUUIDType 5.LongType 6.IntegerType rows_cached:row緩存的數(shù)量,可以為整數(shù)或者百分比。 keys_cached:key緩存的數(shù)量,可以為整數(shù)或者百分比。 row_cache_save_period_in_seconds:定義Column Family中的持久化row緩存的時間間隔,如果為0,關(guān)閉持久化row緩存功能。 key_cache_save_period_in_seconds:定義Column Family中的持久化key緩存的時間間隔,如果為0,關(guān)閉持久化key緩存功能。 gc_grace_seconds:定義Column Family中數(shù)據(jù)標(biāo)記為刪除后到真正進(jìn)行物理刪除的時間間隔,如果不設(shè)置,默認(rèn)為10天(864000秒)。 memtable_flush_after_mins:定義Column Family中memtable最大的生存時間。 memtable_throughput_in_mb:定義Column Family中memtable最大緩存的數(shù)據(jù)大小。 memtable_operations_in_millions:定義Column Family中memtable最大緩存的數(shù)據(jù)條數(shù)。 min_compaction_threshold:定義Column Family中執(zhí)行數(shù)據(jù)壓縮的最小SSTable文件數(shù)。 max_compaction_threshold:定義Column Family中執(zhí)行數(shù)據(jù)壓縮的最大SSTable文件數(shù)。 default_validation_class:定義Column Family中默認(rèn)校驗(yàn)值的類型規(guī)則?蛇x的項(xiàng)為: 1.AsciiType 2.UTF8Type 3.LexicalUUIDType 4.TimeUUIDType 5.LongType 6.IntegerType column_metadata:定義二級索引的屬性。 name:定義需要進(jìn)行二級索引的Column名稱。 validator_class:定義Column Family中校驗(yàn)值的類型規(guī)則。可選的項(xiàng)為: 1.AsciiType 2.UTF8Type 3.LexicalUUIDType 4.TimeUUIDType 5.LongType 6.IntegerType index_type:定義二級索引的類型,目前支持的選項(xiàng)為:KEYS 本文出自:億恩科技【mszdt.com】 服務(wù)器租用/服務(wù)器托管中國五強(qiáng)!虛擬主機(jī)域名注冊頂級提供商!15年品質(zhì)保障!--億恩科技[ENKJ.COM] |