AWS Data Pipeline 不再向新客户提供。的现有客户 AWS Data Pipeline 可以继续照常使用该服务。了解更多
本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
S3 PrefixNotEmpty
一个用于检查是否存在带给定前缀(表示为 URI)的 Amazon S3 对象的先决条件。
示例
以下是使用必填字段、可选字段和表达式字段的该对象类型的示例。
{ "id" : "InputReady", "type" : "S3PrefixNotEmpty", "role" : "test-role", "s3Prefix" : "#{node.filePath}" }
语法
| 必填字段 | 描述 | 槽类型 |
|---|---|---|
| 角色 | 指定用于执行先决条件的角色。 | 字符串 |
| s3Prefix | 用于检查对象是否存在的 Amazon S3 前缀。 | 字符串 |
| 可选字段 | 描述 | 槽类型 |
|---|---|---|
| attemptStatus | 来自远程活动的最近报告的状态。 | 字符串 |
| attemptTimeout | 远程工作完成的超时时间。如果设置此字段,则可能会重试未在设定的开始时间内完成的远程活动。 | 周期 |
| failureAndRerunMode | 描述依赖项失败或重新运行时的使用者节点行为。 | 枚举 |
| lateAfterTimeout | 管道启动后经过的时间,在此时间内,对象必须完成。仅当计划类型未设置为 ondemand 时才会触发。 |
周期 |
| maximumRetries | 失败后的最大重试次数 | 整数 |
| onFail | 当前对象失败时要运行的操作。 | 参考对象,例如 “onFail”:{“ref”:” myActionId “} |
| onLateAction | 在尚未计划对象或对象仍未完成的情况下将触发的操作。 | 引用对象,例如 onLateAction ““: {" ref”:” myActionId “} |
| onSuccess | 当前对象成功时要运行的操作。 | 参考对象,例如 “onSuccess”:{“ref”:” myActionId “} |
| parent | 槽将继承自的当前对象的父级。 | 参考对象,例如 “父对象”:{"ref”:” myBaseObject Id "} |
| preconditionTimeout | 从开始算起的时段,在该时段后,如果仍未满足先决条件,则会将先决条件标记为失败。 | 周期 |
| reportProgressTimeout | 远程工作对 reportProgress 的连续调用的超时时间。如果设置此字段,则未报告指定时段的进度的远程活动可能会被视为停滞且已重试。 | 周期 |
| retryDelay | 两次重试之间的超时时间。 | 周期 |
| 运行时字段 | 描述 | 槽类型 |
|---|---|---|
| @activeInstances | 当前计划的有效实例对象的列表。 | 参考对象,例如 “ActiveInstances”:{"ref”:” myRunnableObject Id "} |
| @actualEndTime | 该对象的执行完成时间。 | DateTime |
| @actualStartTime | 该对象的执行开始时间。 | DateTime |
| cancellationReason | 该对象被取消时显示的 cancellationReason。 | 字符串 |
| @cascadeFailedOn | 对象在其上失败的依赖项链的描述。 | 引用对象,例如 cascadeFailedOn ““: {" ref”:” myRunnableObject Id "} |
| currentRetryCount | 在此尝试中已经重试先决条件的次数。 | 字符串 |
| emrStepLog | 仅在尝试 EMR 活动时可用的 EMR 步骤日志 | 字符串 |
| errorId | 该对象失败时显示的 errorId。 | 字符串 |
| errorMessage | 该对象失败时显示的 errorMessage。 | 字符串 |
| errorStackTrace | 该对象失败时显示的错误堆栈跟踪。 | 字符串 |
| hadoopJobLog | 在尝试基于 EMR 的活动时可用的 Hadoop 任务日志。 | 字符串 |
| hostname | 已执行任务尝试的客户端的主机名。 | 字符串 |
| lastRetryTime | 在此尝试中上次重试先决条件的时间。 | 字符串 |
| 节点 | 将为其执行此先决条件的节点。 | 引用对象,例如 “节点”:{"ref”:” myRunnableObject Id "} |
| reportProgressTime | 远程活动报告进度的最近时间。 | DateTime |
| @scheduledEndTime | 对象的计划结束时间。 | DateTime |
| @scheduledStartTime | 对象的计划开始时间。 | DateTime |
| @status | 该对象的状态。 | 字符串 |
| @version | 用来创建对象的管道版本。 | 字符串 |
| @waitingOn | 该对象在其上处于等待状态的依赖项列表的描述。 | 参考对象,例如 “waitingOn”:{"ref”:” myRunnableObject Id "} |
| 系统字段 | 描述 | 槽类型 |
|---|---|---|
| @error | 用于描述格式不正确的对象的错误消息 | 字符串 |
| @pipelineId | 该对象所属的管道的 ID | 字符串 |
| @sphere | 对象的范围指明对象在生命周期中的位置:组件对象产生实例对象,后者执行尝试对象 | 字符串 |