elk之压测

集群规模：共4台机器组成elasticsearch集群
a)
master节点：1台
单机逻辑CPU：24
单机内存：64G
b)
data节点：3台
单机逻辑CPU：24
单机内存：64G
单机磁盘类型：SATA
单机磁盘个数：1
单机磁盘容量：200GB
c)调优
elasticsearch的JVM调整为24GB
index.number_of_shards调整为3(默认5，根据磁盘数调整)
index.number_of_replicas调整为0(默认1)


压测工具：
a) 压测工具：logstash
b) 压测规模：5-7台logstash
c) 数据来源：input的file插件
d) 单message大小：约500字节
e) index按照小时切割
f) 注：通过内网写入elasticsearch，数据只写到data节点


压测结果1：
a) 时长：1个小时
b) 写入数据：约15GB
c) 写入效率：约9000/s
d) Load Average：3-5波动
e) 磁盘I/O：从刚开始压测的100%下降至60%左右
f) JVM：使用率约5%

压测结果2：
a) 时长：18个小时
b) 写入数据：约200GB
c) 写入效率：约9000/s
d) Load Average：3-5波动
e) 磁盘I/O：从刚开始压测的100%下降至60%左右
f) JVM：使用率上升至至20%

关于满负荷：
使用5台logstash进行压测时，qps约9000，

使用7台logstash进行压测时，qps约9000，无明显变化。

关于高性能集群：http://blog.csdn.net/daiyudong2020/article/details/51195213