Lowongan kerja debugging

catatan

Dengan fitur ini, akses stdout dan stderr log untuk pekerja profil sistem yang mungkin berisi informasi sensitif tanpa filter. Izin berikut harus digunakan hanya untuk mengakses data non-produksi. Untuk aplikasi yang dibuat untuk digunakan dengan pekerjaan produksi, kami sangat menyarankan agar Anda menambahkan izin ini hanya untuk administrator atau pengguna dengan akses data yang lebih tinggi.

Dengan EMR-7.3.0 dan yang lebih baru, EMR Serverless memungkinkan kemampuan self-debugging untuk pekerjaan batch Lake. Formation-enabled Untuk melakukannya, gunakan akses parameter baru SystemProfileLogs di GetDashboardForJobRunAPI. Jika akses SystemProfileLogs disetel ke true, Anda dapat mengakses log stdout dan stderr untuk pekerja profil sistem, yang dapat digunakan untuk men-debug pekerjaan batch Lake Formation-enabled EMR Tanpa Server.

aws emr-serverless get-dashboard-for-job-run \
  --application-id application-id
  --job-run-id job-run-id
  --access-system-profile-logs

Izin yang diperlukan

Kepala sekolah yang ingin men-debug pekerjaan Formation-enabled batch Lake menggunakan GetDashboardForJobRunharus memiliki izin tambahan berikut:

{
    "Sid": "AccessSystemProfileLogs",
    "Effect": "Allow",
    "Action": [
        "emr-serverless:GetDashboardForJobRun",
        "emr-serverless:AccessSystemProfileLogs",
        "glue:GetDatabases",
        "glue:SearchTables"
    ],
    "Resource": [
        "arn:aws:emr-serverless:region:account-id:/applications/applicationId/jobruns/jobid",
        "arn:aws:glue:region:account-id:catalog",
        "arn:aws:glue:region:account-id:database/*",
        "arn:aws:glue:region:account-id:table/*/*"
    ]
}

Pertimbangan-pertimbangan

Log profil sistem untuk debugging terlihat untuk pekerjaan yang mengakses database atau tabel di Lake Formation dalam akun yang sama dengan pekerjaan. Mereka tidak terlihat dalam skenario berikut:

• Jika katalog data yang dikelola menggunakan izin Lake Formation memiliki database dan tabel lintas akun

• Jika katalog data yang dikelola menggunakan izin Lake Formation memiliki tautan sumber daya