怎么实现kibana的数据导入导出

 我来答
EvenHHZ
2016-10-18 · 知道合伙人软件行家
EvenHHZ
知道合伙人软件行家
采纳数:13691 获赞数:18845
个人出版图书:《玩转Python网络爬虫》、《玩转Django2.0》

向TA提问 私信TA
展开全部
logstash好说,client只需要在代码逻辑改下redis地址就可以了,logstash server直接docker pull镜像就可以了。
elasticsearch需要我们自己写脚本迁移,因为跨机房导入导出,挺费工夫的,关于elasticsearch的迁移,我下篇再写,今天主要写kibana的迁移。
kibana配置的迁移,他的配置是在elasticsearch里面,下图就是elasticsearch里kibana的配置信息。

业务和日志的elasticsearch都是一个集群,业务的数据肯定是迁移过去的,至于日志就算了…. 我们这的日志,每个月有几十T,这对于迁移来说,很是繁重… 索性直接干掉…..
这里重点说下怎么把kibana4的配置导出并迁移。 如果你不偷懒,可以自己用pyhton写个elasticsearch的导出程序,实现起来很简单….. 如果你跟我一样很偷懒,那么就直接用现成的工具。 elasticdump是个node.js开发的一个小而精的elasticsearch导出程序。
Python
apt-get update

apt-get install node.js

curl -L https://npmjs.org/install.sh | sh

ln -s /usr/bin/nodejs /bin/node

npm insall elasticdump -g

导出,也可以用来做elasticsearch的备份,elasticdump可以选择性的导出data和mapping。
Python
具体配置信息
elasticdump --ignore-errors=true --scrollTime=120m --bulk=true --input=http://xxxxx:9200/.kibana --output=data.json --type=data

导出mapping信息
elasticdump --ignore-errors=true --scrollTime=120m --bulk=true --input=http://xxxxxx/.kibana --output=mapping.json --type=mapping

咱们再把刚才备份的数据,导入到目标elasticsearch上。
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式