Mejora del rendimiento de Hive

Amazon EMR ofrece funciones que ayudan a optimizar el rendimiento al utilizar Hive para consultar, leer y escribir datos guardados en Amazon S3.

S3 Select puede mejorar el rendimiento de las consultas CSV y JSON los archivos en algunas aplicaciones al «reducir» el procesamiento a Amazon S3.

El compilador optimizado para EMRFS S3 es una alternativa a la OutputCommitterclase, que elimina las operaciones de enumerar y renombrar para mejorar el rendimiento al escribir los archivos que utiliza Amazon S3. EMRFS

Temas

• Habilitar el archivador optimizado de Hive S3 EMRFS
• Uso de S3 Select con Hive para mejorar el rendimiento
• MSCKOptimización