使用 AWS SCT 将 Teradata BTEQ 脚本转换为 Amazon Redshift RSQL - AWS Schema Conversion Tool

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用 AWS SCT 将 Teradata BTEQ 脚本转换为 Amazon Redshift RSQL

您可以使用 AWS Schema Conversion Tool(AWS SCT)将 Teradata Basic Teradata Query(BTEQ)脚本转换为 Amazon Redshift RSQL。

以下架构图显示了数据库迁移项目,其中包括将提取、转换和加载(ETL)脚本转换为 Amazon Redshift RSQL。

显示将 ETL 脚本转换为 RSQL 的示意图。

将 BTEQ 脚本添加到 AWS SCT 项目中

您可以将多个脚本添加到单个 AWS SCT 项目。

将 BTEQ 脚本添加到 AWS SCT 项目中
  1. 在 AWS SCT 中创建新项目,或打开现有项目。有关更多信息,请参阅创建 AWS SCT 项目

  2. 从菜单中选择添加源,然后选择 Teradata 将源数据库添加到项目中。有关更多信息,请参阅将 Teradata 用作源

  3. 从菜单中选择添加目标,将目标 Amazon Redshift 数据库添加到 AWS SCT 项目中。

    您可以使用虚拟的 Amazon Redshift 目标数据库平台。有关更多信息,请参阅使用虚拟目标

  4. 创建新的映射规则,其中包括源 Teradata 数据库和 Amazon Redshift 目标。有关更多信息,请参阅添加新映射规则

  5. 视图菜单上,选择主视图

  6. 在左侧面板中,展开脚本节点。

  7. 选择 BTEQ 脚本,打开上下文(右键单击)菜单,然后选择加载脚本

  8. 输入 Teradata BTEQ 脚本的源代码位置,然后选择选择文件夹

    AWS SCT 显示加载脚本窗口。

  9. 请执行下列操作之一:

    1. 如果您的 Teradata BTEQ 脚本不包含替代变量,请选择无替代变量,然后选择确定将脚本添加到 AWS SCT 项目中。

    2. 如果 Teradata BTEQ 脚本包含替代变量,请配置替代变量。有关更多信息,请参阅在 BTEQ 脚本中配置替代变量

使用 AWS SCT 在 BTEQ 脚本中配置替代变量

Teradata BTEQ 脚本可以包含替代变量。例如,您可以使用一个带有替代变量的 BTEQ 脚本在多个数据库环境中运行同一组命令。您可以使用 AWS SCT 在 BTEQ 脚本中配置替代变量。

在运行带有替代变量的 BTEQ 脚本之前,请确保为所有变量分配值。为此,您可以使用其他工具或应用程序,例如 Bash 脚本、UC4(Automic)等。AWS SCT 只有在替代变量赋值后才能解析和转换替代变量。

在 BTEQ 脚本中配置替代变量
  1. 将 BTEQ 脚本添加到 AWS SCT 项目中。有关更多信息,请参阅将 BTEQ 脚本添加到 AWS SCT 项目中

    添加脚本时,选择使用替代变量

  2. 定义变量格式中,输入与脚本中所有替代变量相匹配的正则表达式。

    例如,如果替代变量的名称以 ${ 开头且以 } 结尾,则使用 \$\{\w+\} 正则表达式。要匹配以美元符号或百分号开头的替代变量,请使用 \$\w+|\%\w+ 正则表达式。

    AWS SCT 中的正则表达式符合 Java 正则表达式语法。有关更多信息,请参阅 Java 文档中的 java.util.regex 类模式

  3. 选择确定,将脚本加载到 AWS SCT 项目中,然后选择确定关闭加载脚本窗口。

  4. 选择变量可查看所有发现的替代变量及其值。

  5. 中,输入替代变量的值。

使用 AWS SCT 将 Teradata BTEQ 脚本转换为 Amazon Redshift RSQL

接下来,了解如何使用 AWS SCT 将 BTEQ ETL 脚本转换为 Amazon Redshift RSQL。

将 Teradata BTEQ 脚本转换为 Amazon Redshift RSQL
  1. 将 BTEQ 脚本添加到 AWS SCT 项目中。有关更多信息,请参阅将 BTEQ 脚本添加到 AWS SCT 项目中

  2. 配置替代变量。有关更多信息,请参阅在 BTEQ 脚本中配置替代变量

  3. 在左侧面板中,展开脚本节点。

  4. 请执行下列操作之一:

    • 要转换单个 BTEQ 脚本,请展开 BTEQ 脚本节点,选择要转换的脚本,然后从上下文(右键单击)菜单中选择转换为 RSQL

    • 要转换多个脚本,请确保选择所有要转换的脚本。然后选择 BTEQ 脚本,打开上下文(右键单击)菜单,然后在转换脚本下选择转换为 RSQL

    AWS SCT 将您选定的所有 Teradata BTEQ 脚本转换为与 Amazon Redshift RSQL 兼容的格式。在目标数据库面板的脚本节点中找到转换后的脚本。

  5. 编辑转换后的 Amazon Redshift RSQL 脚本或将其保存。有关更多信息,请参阅编辑和保存转换后的 BTEQ 脚本

使用 AWS SCT 管理 BTEQ 脚本

您可以添加多个 BTEQ 脚本或从 AWS SCT 项目中移除一个 BTEQ 脚本。

将其他 BTEQ 脚本添加到 AWS SCT 项目中
  1. 在左侧面板中,展开脚本节点。

  2. 选择 BTEQ 脚本节点,然后打开上下文(右键单击)菜单。

  3. 选择加载脚本

  4. 输入添加新 BTEQ 脚本和配置替代变量所需的信息。有关更多信息,请参阅 将 BTEQ 脚本添加到 AWS SCT 项目中在 BTEQ 脚本中配置替代变量

从 AWS SCT 项目中删除 BTEQ 脚本
  1. 展开左侧面板中脚本下的 BTEQ 脚本节点。

  2. 选择要删除的脚本,然后打开上下文 (右键单击) 菜单。

  3. 选择删除脚本

使用 AWS SCT 创建 BTEQ 脚本转换评估报告

BTEQ 脚本转换评估报告提供了有关将 BTEQ 脚本中的 BTEQ 命令和 SQL 语句转换为与 Amazon Redshift RSQL 兼容的格式的信息。评估报告包括 AWS SCT 无法转换的 BTEQ 命令和 SQL 语句的操作项。

创建 BTEQ 脚本转换评估报告
  1. 展开左侧面板中脚本下的 BTEQ 脚本节点。

  2. 选择要转换的脚本,然后打开上下文 (右键单击) 菜单。

  3. 创建报告下选择转换为 RSQL

  4. 查看摘要选项卡。摘要选项卡显示了来自 BTEQ 脚本评估报告的执行摘要信息。它包括 BTEQ 脚本中的所有 BTEQ 命令以及 SQL 语句的转换结果。

  5. (可选)将 BTEQ 脚本转换评估报告的本地副本另存为 PDF 文件或逗号分隔值 (CSV) 文件:

    • 要将 BTEQ 脚本转换评估报告另存为 PDF 文件,请选择右上角的保存为 PDF

      PDF 文件包含脚本转换执行摘要、操作项和建议。

    • 要将 BTEQ 脚本转换评估报告另存为 CSV 文件,请选择右上角的保存为 CSV

      CSV 文件包含操作项、推荐的操作以及转换脚本所需的估计人工操作的复杂度。

  6. 选择操作项选项卡。此选项卡包含需要手动转换为 Amazon Redshift RSQL 的项目列表。从列表中选择一个操作项时,AWS SCT 会突出显示源 BTEQ 脚本中该操作项适用的项。

使用 AWS SCT 编辑和保存转换后的 BTEQ 脚本

您可以在 AWS SCT 项目的下部面板中编辑转换后的脚本。AWS SCT 将编辑后的脚本作为项目的一部分存储。

保存转换后的脚本
  1. 展开目标数据库面板中脚本下的 RSQL 脚本节点。

  2. 选择转换后的脚本,打开上下文(右键单击)菜单,然后选择保存脚本

  3. 输入用于保存转换后的脚本的文件夹路径,然后选择保存

    AWS SCT 将转换后的脚本保存到文件中并打开此文件。