Question

如何提高ElasticSearch 索引速度

Answer 1

1、使用bulk API 2、初次索引的时候，把 replica 设置为 0 3、增大 threadpool.index.queue_size 4、增大 indices.memory.index_buffer_size 5、增大 index.translog.flush_threshold_ops 6、增大 index.translog.sync_interval 7、增大 index.engine.robin.refresh_interval 其中 5,6 属于 TransLog 相关。 4 则和Lucene相关 3 则因为ES里大量采用线程池，构建索引的时候，是有单独的线程池做处理的 7 的话个人认为影响不大 2 的话，能够使用上的场景有限。个人认为Replica这块可以使用Kafka的ISR机制。所有数据还是都从Primary写和读。Replica尽量只作为备份数据。