Bekerja dengan kueri langsung OpenSearch Layanan Amazon dengan Amazon S3 (pratinjau) - OpenSearch Layanan Amazon

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Bekerja dengan kueri langsung OpenSearch Layanan Amazon dengan Amazon S3 (pratinjau)

Ini adalah dokumentasi prarilis untuk kueri langsung OpenSearch Layanan Amazon dengan Amazon S3, yang dalam rilis pratinjau. Dokumentasi dan fitur dapat berubah. Sebaiknya gunakan fitur ini hanya dalam lingkungan pengujian, bukan dalam lingkungan produksi. Untuk syarat dan ketentuan pratinjau, lihat Beta dan Pratinjau di Persyaratan LayananAWS.

Anda dapat menggunakan kueri langsung Amazon OpenSearch Service untuk menanyakan data di Amazon S3. Amazon OpenSearch Service menyediakan integrasi kueri langsung dengan Amazon S3 sebagai cara untuk menganalisis log operasional di Amazon S3 dan data lake yang berbasis di Amazon S3 tanpa harus beralih antar layanan. Anda sekarang dapat menganalisis data di toko objek cloud—dan secara bersamaan menggunakan analisis operasional dan visualisasi Layanan. OpenSearch

Dengan kueri langsung dengan Amazon S3, Anda tidak perlu lagi membangun pipeline ETL yang kompleks atau mengeluarkan biaya duplikasi data di penyimpanan Layanan OpenSearch dan Amazon S3. Anda juga dapat menginstal integrasi template tipe log populer yang menyertakan dasbor yang telah ditentukan sebelumnya, dan mengonfigurasi akselerasi data yang disesuaikan dengan jenis log tersebut. Template termasuk Log Aliran VPC, log, dan AWS CloudTrail log Amazon S3. Akselerasi termasuk melewatkan indeks, tampilan terwujud, dan indeks tertutup.

Harga

Anda membayar OpenSearch layanan yang ada dan sumber daya Amazon S3 yang digunakan untuk membuat dan memproses kueri langsung. Kueri yang dikirim ke Amazon S3 menggunakan komputasi yang dapat ditagih dan muncul OpenSearch sebagai Unit Komputasi (OCU) per jam.

Kueri langsung dengan Amazon S3 terdiri dari dua jenis — pemeliharaan interaktif dan indeks. Kueri interaktif melakukan analitik pada data Anda di Amazon S3. Ketika Anda menjalankan kueri baru, OpenSearch Layanan memulai sesi baru yang berlangsung selama minimal sepuluh menit. OpenSearch Layanan membuat sesi tetap aktif untuk memastikan bahwa kueri berikutnya berjalan dengan cepat. Kueri pemeliharaan indeks menggunakan komputasi untuk mempertahankan indeks di Layanan. OpenSearch Kueri ini biasanya memakan waktu lebih lama karena mereka menyerap sejumlah data yang dapat dikonfigurasi ke dalam OpenSearch Layanan untuk membuat kueri interaktif berjalan lebih cepat.

Untuk informasi selengkapnya, lihat Harga OpenSearch Layanan Amazon.

Batasan

Batasan berikut berlaku untuk kueri langsung OpenSearch Layanan dengan Amazon S3.

  • OpenSearch Domain Anda harus versi 2.11 atau yang lebih baru untuk mendukung kueri langsung OpenSearch Layanan.

  • OpenSearch Kueri langsung layanan dengan Amazon S3 hanya mendukung tabel Spark di dalam file. AWS Glue Data CatalogTabel sarang tidak mendukung streaming Spark, yang diperlukan untuk menjaga indeks tetap up to date.

  • Beberapa jenis data tidak didukung. Tipe data yang didukung terbatas pada Parket, CSV, dan JSON.

  • AWS CloudFormation template tidak didukung dalam rilis pratinjau kueri langsung.

  • OpenSearch Domain Anda dan AWS Glue Data Catalog harus sama Akun AWS. Tabel Amazon S3 Anda dapat berada di akun yang berbeda, tetapi harus Wilayah AWS sama dengan domain Anda.

  • Struktur Spark Bersarang tidak didukung. Jika data sumber Anda menggunakan struktur bersarang, Anda harus meledakkannya menjadi baris.

  • Tabel yang dibuat melalui Athena tidak didukung.

  • Kolom yang hilang mungkin memerlukan penggunaan fungsi COALESCE SQL untuk mengembalikan hasil.

  • Tidak tersedia di OpenSearch Serverless

  • Data harus diratakan sebelum kueri atau Anda harus menggunakan SQL di OpenSearch Layanan untuk mengubah kolom bersarang Anda menjadi kolom khusus.

Kuota

Akun Anda memiliki kuota berikut yang terkait dengan kueri langsung OpenSearch Layanan dengan Amazon S3. Setiap kali Anda memulai kueri, OpenSearch Layanan membuka sesi dan membuatnya tetap hidup setidaknya selama sepuluh menit. Ini mengurangi latensi kueri dengan menghapus waktu startup sesi di kueri berikutnya.

Deskripsi Maxiumum
Koneksi per domain 20
Sumber data per domain 20
Indeks per domain 50
Sesi bersamaan per sumber data 100

Wilayah yang Didukung

Wilayah berikut tersedia untuk pertanyaan langsung OpenSearch Layanan dengan Amazon S3: Asia Pasifik (Tokyo), Eropa (Frankfurt), Eropa (Irlandia), AS Timur (Virginia N.), AS Timur (Ohio), dan AS Barat (Oregon).