TensorFlow

TensorFlow adalah perpustakaan matematika simbolik sumber terbuka untuk kecerdasan mesin dan aplikasi pembelajaran mendalam. Untuk informasi lebih lanjut, lihat situs TensorFlow web. TensorFlow tersedia dengan rilis Amazon EMR versi 5.17.0 dan yang lebih baru.

Tabel berikut mencantumkan versi yang TensorFlow disertakan dalam rilis terbaru seri Amazon EMR 7.x, bersama dengan komponen yang dipasang Amazon EMR. TensorFlow

Untuk versi komponen yang diinstal TensorFlow dalam rilis ini, lihat Rilis 7.10.0 Versi Komponen.

TensorFlow informasi versi untuk emr-7.10.0

Label Rilis Amazon EMR	TensorFlow Versi	Komponen Dipasang Dengan TensorFlow
emr-7.10.0	TensorFlow 2.18.0	emrfs, emr-goodies, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, tensorflow

Tabel berikut mencantumkan versi yang TensorFlow disertakan dalam rilis terbaru seri Amazon EMR 6.x, bersama dengan komponen yang dipasang Amazon EMR. TensorFlow

Untuk versi komponen yang diinstal TensorFlow dalam rilis ini, lihat Rilis Versi Komponen 6.15.0.

TensorFlow informasi versi untuk emr-6.15.0

Label Rilis Amazon EMR	TensorFlow Versi	Komponen Dipasang Dengan TensorFlow
emr-6.15.0	TensorFlow 2.11.0	emrfs, emr-goodies, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, tensorflow

Tabel berikut mencantumkan versi yang TensorFlow disertakan dalam rilis terbaru seri Amazon EMR 5.x, bersama dengan komponen yang dipasang Amazon EMR. TensorFlow

Untuk versi komponen yang diinstal TensorFlow dalam rilis ini, lihat Rilis 5.36.2 Versi Komponen.

TensorFlow informasi versi untuk emr-5.36.2

Label Rilis Amazon EMR	TensorFlow Versi	Komponen Dipasang Dengan TensorFlow
emr-5.36.2	TensorFlow 2.4.1	emrfs, emr-goodies, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, tensorflow

TensorFlow dibangun berdasarkan jenis EC2 instans Amazon

Amazon EMR menggunakan build TensorFlow pustaka yang berbeda tergantung pada jenis instans yang Anda pilih untuk klaster Anda. Amazon EMR mendukung klaster dengan tipe instans aarch64 (Graviton) TensorFlow untuk EMR-7.5.0 dan yang lebih baru. Tabel berikut mencantumkan build berdasarkan jenis instans.

EC2 jenis contoh	TensorFlow membangun
M5 dan C5	Tensorflow 2.16.1 dengan optimasi Intel MKL
P2, P4D, P5, G4DN, G5, G6 dan GR6	Tensorflow 2.16.1 dengan CUDA 12.3, cuDNN 8.9.7.29
P3, P3DN, G3 dan G3S	Tensorflow 2.16.1 dengan CUDA 12.3, cuDNN 8.9.7.29, NCCL 2.20.3-1 Nvidia NCCL hanya tersedia pada instans P3. Perjanjian Lisensi Pengguna Akhir (EULA): Dengan menggunakan komponen Nvidia pada Amazon EMR, Anda menyetujui syarat dan ketentuan yang diuraikan dalam EULA produk.
Semua yang lain kecuali contoh Graviton	Tensorflow 2.16.1

Keamanan

Selain mengikuti panduan dalam Menggunakan TensorFlow dengan aman, kami menyarankan Anda meluncurkan klaster Anda di subnet pribadi untuk membantu Anda membatasi akses ke sumber tepercaya. Untuk informasi selengkapnya, lihat opsi Amazon VPC di Panduan Pengelolaan Amazon EMR.

Menggunakan TensorBoard

TensorBoard adalah seperangkat alat visualisasi untuk TensorFlow program. Untuk informasi lebih lanjut, lihat TensorBoard: Pembelajaran yang divisualisasikan di situs web Tensorflow.

Untuk menggunakan TensorBoard dengan Amazon EMR, Anda harus memulai TensorBoard pada node master cluster.

Untuk menggunakan tensorboard dengan Tensorflow di Amazon EMR

1. Sambungkan ke simpul utama menggunakan SSH. Untuk informasi selengkapnya, lihat Sambungkan ke simpul utama menggunakan SSH di Panduan Pengelolaan Amazon EMR.

2. Ketikkan perintah berikut untuk memulai Tensorboard pada simpul utama. Ganti /my/log/directory dengan direktori pada simpul utama di mana Anda telah membuat dan menyimpan data ringkasan menggunakan penulis ringkasan.

   Amazon EMR 5.19.0 and later

   python3 -m tensorboard.main --logdir=/home/hadoop/tensor --bind_all

   Amazon EMR 5.18.1 and earlier

   python3 -m tensorboard.main --logdir=/my/log/dir

   Secara default, master node host TensorBoard menggunakan port 6006 dan nama DNS publik master. Setelah Anda mulai TensorBoard, output baris perintah menyajikan URL yang dapat digunakan untuk terhubung TensorBoard, seperti yang ditunjukkan pada contoh berikut:

   TensorBoard 2.16.1 at http://master-public-dns-name:6006 (Press CTRL+C to quit)

3. Mengatur akses ke antarmuka web pada simpul utama dari klien tepercaya. Untuk informasi selengkapnya, lihat Antarmuka web yang di-host di kluster Amazon EMR di Panduan Pengelolaan Amazon EMR.

4. Buka TensorBoard dihttp://master-public-dns-name:6006.