同步RDS数据到 Elasticsearch 中并进行搜索分析
阿里云上拥有丰富的云存储、云数据库产品。如果您希望针对这些产品中的数据进行分析和搜索,可以通过DataWorks的数据集成服务,将离线数据同步到Elasticsearch中,最快可达到5分钟一次。注意:做数据同步时可能会产生公网流量费用,请您知晓。准备工作完成离线数据的分析与搜索,需要您完成以下几步操作:创建一个数据库,您可以选择使用阿里云的RDS数据库,也可以在本地服务器上自...
·
阿里云上拥有丰富的云存储、云数据库产品。如果您希望针对这些产品中的数据进行分析和搜索,可以通过DataWorks的数据集成服务,将离线数据同步到Elasticsearch中,最快可达到5分钟一次。
注意:做数据同步时可能会产生公网流量费用,请您知晓。
准备工作
完成离线数据的分析与搜索,需要您完成以下几步操作:
- 创建一个数据库,您可以选择使用阿里云的RDS数据库,也可以在本地服务器上自建数据库。本文档以RDS for MySQL数据库为例,数据库字段及数据如下图所示。
- 购买一台可以与VPC内的Elasticsearch交互的ECS,这台ECS将获取数据源数据并执行写Elasticsearch数据的任务(该任务将由数据集成系统统一下发)。
- 开通DataWorks的数据集成服务,并且将ECS作为一个可以执行任务的资源,注册到数据集成服务中去。
- 配置一个数据同步的脚本,并且让其可以周期性的执行起来。
- 创建一个Elasticsearch实例,用来存储数据集成系统同步成功的数据。
更多推荐
已为社区贡献9条内容
所有评论(0)