Justin DBA & Sona Developer: Couchbase ( 시스템 산정 가이드 )

산정 대상 Variable

Variable	Description
Documents Count	Working Set 으로 예상되는 Document 의 총 수
ID Size	Documents ID 의 평균 Size ( Key )
Value Size	Value 의 평균 Size
Number of Replicas	복제(Replica) 의 수
Working Set Percentage	Memory 에 상주하여 Data 를 사용할 percnetage
Ram Quota Per Node	노드당 Couchbase 를 위해 할당할 Ram Quota OS 와 특정 APP 가 사용할 최소 2GB 의 RAM 이상의 여유분을 제외하고 Quota 를 잡는 것을 권고
MetaData Per Document	MetaData 는 Document 당 60 Byte 고정 (반드시 메모리에 상주)
Headroom	일종의 Metadata 를 위한 보정치 SSD 를 사용하면 Memory 의 25% , Hard Disk 사용 시 Memory 의 30%
High Water Mark	Couchbase 에서 설정하는 RAM 의 High Water Mark Default 로 Node의 RAM 에 85% 로 설정

산정 공식

Variable	Description	Detail
No_of_copies	1 + Replica 의 수	원본 노드와 Replica 의 수
Total_metadata	(Documents Count) * ( Metadata per Document + ID Size ) * (No_of_copies)	Document Count 는 최대 증가 예상 수를 추측
Total_Dataset	(Documents Count) * ( Value Size ) * ( No_of_copies )	Document Count 는 최대 증가 예상 수를 추측
Working_Set	Total_dataset * ( Working_set_percentage )	메모리에 상주시킬 평균 Working Set 크기
Cluster RAM quota Required	(Total_metadata + Working_set ) * ( 1 + headroom) / ( high water mark)	Cluster 에서 사용될 총 RAM 필요 크기
Number of Nodes	Cluster RAM quota required / RAM quota per node	Cluster 구성에 필요한 노드 수 RAM quota per node 는 Physical Memory - 2GB 권고

산정 공식 예시 (Input Variable)

Input Variable	Sample Value
Document Count	1,000,000 Row
ID Size	100 Byte
Value Size	10,000 Bye
Number of Replicas	1
Working Set Percentage	20 %
Type Of Storage -- Overhead Percentage	IF(HDD)THEN 30%
Metadata Per Document	60 Byte
High Water Mark	85 %
RAM quota per node	6 GB ( Physical Mem 8GB 시)

산정 공식 대입 예시(Calculation)

variable	Calculation	Detail
No_of_copies	1 + 1	원본 노드와 Replica 수의 합
Total_metaData	1,000,000 * ( 60 + 100) * (2) = 320,000,000 Byte	1,000,000 Row 에 필요한 MetaData 크기 (반드시 RAM 에 상주)
Total_Dataset	1,000,000 * (10,000) * (2) = 20,000,000,000 Byte	Key 를 제외한 총 Data 의 크기
Working_Set	20,000,000,000 * (0.2) = 4,000,000,000 Byte	Working Set 으로 활용될 Memory 의 크기
Cluster RAM Quota Required	( 320,000,000 +4,000,000,000) * ( 1+ 0.30 ) / (0.8) = 7,020,000,000 Byte ( 6.6 GB)	총 필요한 RAM 의 크기
Number of Nodes	6.6 GB / 6GB = 1.1 Node Or 2 Node	Cluster 구성에 필요한 노드의 수는 ( Cluster RAM Quota Required /노드당 Quota )

Disk Throughput and sizing
1. Size
  - Key-Value Data Only : Disk 의 사이즈는 Key-value data 만을 유지하는 기준으로 저장될 모든 Dataset 의 size 의 2~3배를 권고합니다.
  - View 사용 : View 가 사용될 경우 View 는 실제 데이터를 저장하여 Indexing 으로 사용하기 때문에 View 의 개수에 따라 적절히 추가 산정해야 합니다.
2. Throughpu
  1. Couchbase 는 데이터 영속성을 위해 Disk 에 Key-value 를 저장하게 되므로, Disk I/O 도 중요합니다.
  2. Couchbase Server 의 Install 영역과 Data, Index(View) 영역을 물리적인 Disk 분할 함으로서 I/O 분산 효과로 성능이 향상됩니다.
    
    분류
    
    물리적 분할
    
    Mount
    
    Engine
    
    /dev/sda1
    
    /opt/couchbase
    
    Data
    
    /dev/sdb
    
    /data
    
    Index
    
    /dev/sdc
    
    /index
  3. RAID 구성은 필요조건은 아니나 RAID 0 or 10 을 권장합니다.
Network Bandwidth
1. 최소 1 Gig Bit 대역의 Network 으로 구성하는 것이 좋으며, Low latency 가 중요한 환경일 경우 10 Gig Bit 대역도 성능 향상에 도움이 됩니다.
Couchbase Version
1. 현재 Community Edition의 최신 버전을 사용할 것을 권장

항목	권장 SPEC
CPU	8 Core
RAM(Physical)	최소 16GB ~ 32GB ( 추가 확장 필요시 Scale-Out 으로 확장)
Disk	HDD Disk ( Data/Index 물리적 분활) , 예상 저장 DataSet 의 3배 권장
Network	1 Gig Bit Bandwidth
Couchbase Version	Community Edition 최신 버전

Justin DBA & Sona Developer