通过交互式会话建立 AWS Glue 工作岗位 - AWS Glue

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

通过交互式会话建立 AWS Glue 工作岗位

数据工程师可以创作 AWS Glue 在中使用交互式会话比以前更快、更轻松地完成工作 AWS Glue.

的概述 AWS Glue 交互式会话

随着 AWS Glue 交互式会话,您可以快速构建、测试和运行数据准备和分析应用程序。交互式会话提供了编程和可视化界面,用于构建和测试用于数据准备的提取、转换和加载 (ETL) 脚本。交互式会话运行 Apache Spark 分析应用程序,并提供对远程 Spark 运行时环境的按需访问。AWS Glue 透明地管理这些交互式会话的无服务器 Spark。

由于交互式会话非常灵活,因此您可以在自己选择的环境中构建和测试应用程序。您可以通过和创建和使用交互式会话API。 AWS Command Line Interface 您可以使用 Jupyter 兼容的笔记本直观地编写和测试笔记本脚本。交互式会话提供了一个开源 Jupyter 内核,该内核几乎可以与 Jupyter 集成在任何地方,包括与 PyCharm IntelliJ 和 VS Code IDEs 等集成。这可让您在本地环境中编写代码并在交互式会话后端无缝运行它。

使用交互式会话API,客户可以编程方式运行使用 Apache Spark 分析的应用程序,而无需管理 Spark 基础架构。您可以在单个交互式会话中运行一条或多条 Spark 语句。

因此,交互式会话提供了一种更快、更便宜、更灵活的方式来构建和运行数据准备与分析应用程序。要了解如何使用交互式会话,请参阅文档中的本节。由... 支持的魔法 AWS Glue

限制

  • 交互式会话中不支持任务书签。

  • 不支持使用创建笔记本作业。 AWS Command Line Interface

  • AWS Glue Studio 笔记本电脑不支持 Scala。