阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过阿里云Logstash将自建Elasticsearch数据迁移至阿里云
使用限制自建Elasticsearch集群所在的ECS的网络类型必须是专有网络,不支持Classiclink方式打通的ECS。
由于阿里云Logstash实例部署在专有网络下,如果自建Elasticsearch集群与阿里云Logstash集群在同一专有网络下,可直接配置;如果不在,需要通过配置NAT网关实现与公网的连通,具体操作请参见配置NAT公网数据传输。
自建Elasticsearch集群所在的ECS的安全组不能限制Logstash集群的各节点IP(可在基本信息页面查看),并且需要开启9200端口。
本文以自建Elasticsearch 5.6.16 > 阿里云Logstash 6.7.0 > 阿里云Elasticsearch 6.7.0为例,提供的脚本仅适用于该数据迁移方案,其他方案不保证兼容。如果您使用的是其他方案,可参见产品兼容性判断是否存在兼容性问题。如果存在,可升级实例版本或新购实例。
步骤一:环境准备
搭建自建Elasticsearch集群。
建议您使用阿里云ECS搭建自建Elasticsearch集群,本文以5.6.16版本为例,具体操作请参见安装并运行Elasticsearch。
创建阿里云Logstash实例。
建议创建与部署自建Elasticsearch集群的ECS实例在同一专有网络下的Logstash实例,具体操作请参见创建阿里云Logstash实例。
创建目标阿里云Elasticsearch实例,并开启实例的自动创建索引功能。
建议创建与Logstash实例在同一专有网络下,且版本相同的Elasticsearch实例。本文以6.7.0版本为例,具体操作请参见创建阿里云Elasticsearch实例。
开启自动创建索引功能的具体操作,请参见配置YML参数。
步骤二:配置并运行Logstash管道
登录阿里云Elasticsearch控制台。
进入目标实例。
在顶部菜单栏处,选择地域。
在左侧导航栏,单击Logstash实例,然后在Logstash实例中单击目标实例ID。
在左侧导航栏,单击管道管理。
单击创建管道。
在创建管道任务页面,输入管道ID并配置管道。
本文使用的管道配置如下。
单击保存或者保存并部署。
保存:将管道信息保存在Logstash里并触发实例变更,配置不会生效。保存后,系统会返回管道管理页面。可在管道列表区域,单击操作列下的立即部署,触发实例重启,使配置生效。
保存并部署:保存并且部署后,会触发实例重启,使配置生效。
步骤三:查看数据迁移结果
登录目标阿里云Elasticsearch实例的Kibana控制台,根据页面提示进入Kibana主页。
登录Kibana控制台的具体操作,请参见登录Kibana控制台。
在左侧导航栏,单击Dev Tools。
在Console中,执行GET /_cat/indices?v命令,查看迁移成功的索引。
标题:阿里云国际账号免费开户,阿里云账号代购,24h自助充值
地址:http://www.cq828.cn/xwzx/39603.html