什么是亚马逊 OpenSearch 服务? - 亚马逊 OpenSearch 服务

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

什么是亚马逊 OpenSearch 服务?

Amazon OpenSearch Service 是一项托管服务,可以轻松地在 AWS 云中部署、操作和扩展 OpenSearch 集群。亚马逊 OpenSearch 服务支持 OpenSearch 传统的 Elasticsearch OSS(最高 7.10,即该软件的最终开源版本)。创建集群时,您可以选择使用哪种搜索引擎。

OpenSearch是一个完全开源的搜索和分析引擎,用于日志分析、实时应用程序监控和点击流分析等用例。有关更多信息,请参阅OpenSearch 文档

Amazon S OpenSearch ervic e 会为您的 OpenSearch 集群配置所有资源并启动它。它还可以自动检测和替换出现故障的 OpenSearch 服务节点,从而减少与自我管理基础架构相关的开销。您只需调用一次 API 或在控制台中单击几下就可扩展集群。

要开始使用 S OpenSearch ervice,您需要创建一个相当于 OpenSearch 集群的 OpenSearch 服务。集群中的每个 EC2 实例都充当一个 OpenSearch 服务节点。

您可以使用 OpenSearch 服务控制台在几分钟内设置和配置域。如果您更喜欢编程访问,则可以使用、AWS 软件开发工具包TerraformAWS CLI

Amazon OpenSearch 服务的特点

OpenSearch 服务包括以下功能:

Scale

  • 大量 CPU、内存和存储容量配置,也称为实例类型,包括具有成本效益的 Graviton 实例。

  • 高达 3 PB 的附加存储空间

  • 为只读数据提供经济实惠UltraWarm冷存储

安全性

  • AWS Identity and Access Management (IAM) 访问控制

  • 与 Amazon VPC 和 VPC 安全组轻松集成

  • 静态数据加密和 node-to-node 加密

  • 控制面板的 Amazon Cognito、HTTP 基本身份验证或 SAML 身份验证 OpenSearch

  • 索引级、文档级和字段级安全性

  • 审核日志

  • 控制面板多租户

稳定性

  • 资源具有大量的地理位置,也称为区域可用区

  • 在同一区域的两个或三个可用区(称为可用 AWS 区)之间分配节点

  • 利用专用主节点来卸载集群管理任务

  • 用于备份和恢复 OpenSearch 服务域的自动快照

弹性

  • SQL 支持与商业智能 (BI) 应用程序集成

  • 自定义程序包以改善搜索结果

与热门服务的集成

  • 使用 OpenSearch 仪表板实现数据可视化

  • 与 Amazon 集成, CloudWatch 用于监控 OpenSearch 服务域指标和设置警报

  • 与集成 AWS CloudTrail ,用于审计配置 API 对 OpenSearch 服务域的调用

  • 与亚马逊 S3、亚马逊 Kinesis 和亚马逊 DynamoDB 集成,用于将流数据加载到服务中 OpenSearch

  • 数据超过特定阈值时从 Amazon SNS 发出的警报

何时使用 OpenSearch 与亚马逊 OpenSearch 服务相比

使用下表来帮助您确定预配置的 Amazon OpenSearch 服务还是自行管理 OpenSearch 是您的正确选择。

OpenSearch 亚马逊 OpenSearch 服务
  • 您的组织愿意手动监控和维护自行配置的集群,并且有具备相应技能的人员。

  • 你想对你的代码进行全面的编译级控制。

  • 您的组织更喜欢或独一无二地使用开源软件。

  • 你有一个多云战略,需要的不是特定于供应商的技术。

  • 您的团队有能力解决任何关键的生产问题。

  • 您希望能够灵活地随心所欲地使用、修改和扩展产品。

  • 您希望在新功能发布后立即访问它们。

  • 您不想手动管理、监控和维护您的基础架构。

  • 您想要利用Amazon S3的耐用性和低成本优势,通过跨存储层对数据进行分层来管理不断增长的分析成本的简单方法。

  • 你想利用与其他数据库的集成, AWS 服务 例如 DynamoDB、Amazon DocumentDB(兼容 MongoDB)、IAM 和。 CloudWatch CloudFormation

  • 在预防性维护和生产期间出现问题时,您需要轻松获得帮助。 AWS Support

  • 您想利用自我修复、主动维护、弹性和备份等功能。

Amazon OpenSearch 无服务器

Amazon OpenSearch Serverless 是一种针对亚马逊 OpenSearch 服务的按需、自动扩展、无服务器配置。Serverless 消除了配置、配置和调整集群的操作复杂性。 OpenSearch 有关更多信息,请参阅 Amazon OpenSearch 无服务器

Amazon OpenSearch Ingestion

Amazon OpenSearch Ingestion 是一款完全托管的数据收集器,由 Data Prepper 提供支持,可向亚马逊 OpenSearch 服务域和无服务器集合提供实时日志和 OpenSearch 跟踪数据。可让您筛选、扩充、转换、标准化和聚合数据,以便进行下游分析和可视化。有关更多信息,请参阅 Amazon OpenSearch Ingesti on。

OpenSearch 和 Elasticsearch 支持的版本

OpenSearch 服务目前支持以下 OpenSearch 版本:

  • 2.13、2.11、2.9、2.7、2.5、2.3、1.3、1.2、1.1、1.0

OpenSearch 服务还支持以下旧版 Elasticsearch OSS 版本:

  • 7.10、7.9、7.8、7.7、7.4、7.1

  • 6.8、6.7、6.5、6.4、6.3、6.2、6.0

  • 5.6、5.5、5.3、5.1

  • 2.3

  • 1.5

有关更多信息,请参阅 Amazon OpenSearch 服务中支持的操作Amazon OpenSearch 服务中按引擎版本划分的功能Amazon OpenSearch 服务中按引擎版本划分的插件

如果您启动新的 OpenSearch 服务项目,我们强烈建议您选择支持的最新 OpenSearch 版本。如果您的现有域使用的是较旧的 Elasticsearch 版本,您可以选择保留该域或迁移您的数据。有关更多信息,请参阅 升级亚马逊 OpenSearch 服务域名

亚马逊 OpenSearch 服务的定价

对于 OpenSearch 服务,您需要为 EC2 实例的每小时使用量以及连接到您的实例的任何 EBS 存储卷的累积大小付费。标准 AWS 数据传输费用也适用。

但是,存在一些明显的数据传输异常。如果一个域使用多个可用区,则 OpenSearch 服务不会为可用区之间的流量计费。在分片分配和重新平衡期间,域内会发生大量数据传输。 OpenSearch 服务既不计量也不为此流量计费。同样, OpenSearch 服务不对 UltraWarm/节点和 Amazon S3 之间的数据传输收费。

有关全部定价详情,请参阅 Amazon OpenSearch 服务定价。有关配置更改期间产生的费用的信息,请参阅 配置更改的费用

亚马逊 OpenSearch 服务入门

开始之前,如果您还没有账户,请先先注册一个 AWS 账户。设置账户后,完成亚马逊 OpenSearch 服务入门教程。如果您在了解该服务时需要更多信息,请参考以下介绍性主题:

有关从自行管理的 OpenSearch 集群迁移到 S OpenSearch ervice 的信息,请参阅教程:迁移至 Amazon OpenSearch Service

OpenSearch 服务通常与以下服务一起使用:

Amazon CloudWatch

OpenSearch 服务域会自动向发送指标, CloudWatch 以便您可以监控域的运行状况和性能。有关更多信息,请参阅 使用 Amazon 监控 OpenSearch 集群指标 CloudWatch

CloudWatch 日志也可以反其道而行之。您可以将 CloudWatch 日志配置为将数据流式传输到 OpenSearch 服务进行分析。要了解更多信息,请参阅正在加载来自亚马逊的流媒体数据 CloudWatch

AWS CloudTrail

AWS CloudTrail 用于获取您账户的 OpenSearch 服务配置 API 调用和相关事件的历史记录。有关更多信息,请参阅 使用 AWS CloudTrail 监控 Amazon OpenSearch Service API 调用

Amazon Kinesis

Kinesis 是一种托管服务,能够实时进行大规模流数据处理。有关更多信息,请参阅 从 Amazon Kinesis Data Streams 加载流数据从 Amazon Data Firehose 加载流数据

Amazon S3

Amazon Simple Storage Service (Amazon S3) 提供 Internet 的存储服务。本指南提供了用于与 Amazon S3 集成的 Lambda示例代码。有关更多信息,请参阅 从 Amazon S3 表中加载流数据

AWS IAM

AWS Identity and Access Management (IAM) 是一项 Web 服务,可用于管理对 OpenSearch 服务域的访问权限。有关更多信息,请参阅 亚马逊 OpenSearch 服务中的身份和访问管理

AWS Lambda

AWS Lambda 是一项计算服务,允许您在不预置或管理服务器的情况下运行代码。本指南提供了 Lambda 示例代码,用于从DynamoDB、Amazon S3 和 Kinesis 流式传输数据。有关更多信息,请参阅 将流数据加载到 Amazon OpenSearch 服务

Amazon DynamoDB

Amazon DynamoDB 是一种全托管 NoSQL 数据库服务,提供快速而可预测的性能,能够实现无缝扩展。要了解有关将数据流式传输到 OpenSearch 服务的更多信息,请参阅从 Amazon DynamoDB 表中加载流数据

Amazon QuickSight

您可以使用 Amazon QuickSight 控制面板可视化来自 OpenSearch 服务的数据。有关更多信息,请参阅《亚马逊 QuickSight 用户指南》 QuickSight中的在亚马逊上使用亚马逊 OpenSearch 服务

注意

OpenSearch 包括来自 Elasticsearch B.V. 的某些 Apache 许可的 Elasticsearch 代码和其他源代码。Elasticsearch B.V. 不是其他源代码的源。ELASTICSEARCH 是 Elasticsearch B.V. 的注册商标。