REL06-BP05 Menganalisis log
Kumpulkan riwayat metrik dan file log dan analisis ini untuk mendapatkan wawasan beban kerja dan tren lebih luas.
Wawasan Log Amazon CloudWatch mendukung bahasa kueri sederhana namun berdayaguna yang dapat Anda gunakan untuk melakukan analisis data log. Log Amazon CloudWatch juga mendukung berlangganan yang memungkinkan data mengalir dengan mulus ke Amazon S3 tempat Anda dapat menggunakan data atau Amazon Athena untuk melakukan kueri data. Amazon CloudWatch Logs juga mendukung pembuatan kueri dengan berbagai macam format. Lihat SerDes dan Format Data yang Didukung di Panduan Pengguna Amazon Athena untuk mendapatkan informasi selengkapnya. Untuk melakukan analisis set file log yang sangat besar, Anda dapat menjalankan klaster Amazon EMR untuk melakukan analisis skala petabita.
Ada sejumlah alat yang disediakan oleh Partner AWS dan pihak ketiga yang dapat memungkinkan agregasi, pemrosesan, penyimpanan, dan analitik. Alat-alat ini antara lain New Relic, Splunk, Loggly, Logstash, CloudHealth, dan Nagios. Namun demikian, log generasi di luar sistem dan log aplikasi bersifat unik untuk setiap penyedia cloud, dan sering kali bersifat unik untuk masing-masing layanan.
Bagian proses pemantauan yang sering kali tidak diperhatikan adalah manajemen data. Anda harus menentukan persyaratan-persyaratan retensi untuk memantau data, kemudian Anda harus menerapkan kebijakan siklus hidup yang sesuai. Amazon S3 mendukung manajemen siklus hidup pada tingkat bucket S3. Manajemen siklus hidup ini dapat diterapkan secara berbeda ke jalur-jalur yang berbeda yang ada dalam bucket tersebut. Menjelang akhir siklus hidup, Anda dapat melakukan transisi data ke Amazon S3 Glacier untuk mendapatkan penyimpanan jangka panjang, dan kemudian akan menjadi kedaluwarsa setelah akhir jangka waktu retensi tercapai. Kelas penyimpanan S3 Intelligent-Tiering didesain untuk mengoptimalkan biaya dengan secara otomatis memindahkan data ke tingkat akses yang paling hemat biaya, tanpa memengaruhi performa atau menimbulkan biaya operasional tambahan.
Tingkat risiko yang terjadi jika praktik terbaik ini tidak diterapkan: Sedang
Panduan implementasi
-
Wawasan Log CloudWatch akan memungkinkan Anda untuk secara interaktif mencari dan menganalisis data log Anda di Log Amazon CloudWatch.
-
Gunakan Log Amazon CloudWatch untuk mengirim log ke Amazon S3 tempat Anda dapat menggunakan data atau Amazon Athena tempat Anda dapat melakukan kueri data.
-
Bagaimana cara menganalisis log akses server Amazon S3 menggunakan Athena?
-
Buat kebijakan siklus hidup S3 untuk bucket log akses server Anda. Konfigurasikan kebijakan siklus hidup untuk secara berkala menghapus file log. Hal ini mengurangi jumlah data yang dianalisis oleh Athena untuk setiap kueri.
-
-
Sumber daya
Dokumen terkait:
