Amazon EMR 7.3.0 - Notas de lançamento do Tez

Amazon EMR 7.3.0 - Mudanças no chá

Type	Descrição
Melhoria	Forneça a opção de habilitar o SSL para o Tez AM Web UI Service

Amazon EMR 7.3.0 - Novas configurações

Classificação	Nome	Padrão	Descrição
tez-site	tez.am.tez-ui.webservice.enable.ssl	false	Permitir a ativação do SSL para a AM Web UIService
tez-site	tez.am.tez-ui.webservice.enable.client.auth	false	Permitir habilitar a autenticação do lado do cliente para o AM Web UIService

Amazon EMR 7.3.0 - Tez problemas conhecidos

Problema de limpeza do Tez DAG (EMR 6.11.0 - EMR 7.2.0) — Em clusters com SSL habilitado executando as versões 6.11.0 a 7.2.0 do EMR, há um problema SSLHandshake conhecido em que ocorre uma exceção no TEZ Application Master (AM) durante a fase de limpeza do DAG. Isso acontece ao tentar excluir dados aleatórios intermediários de nós remotos por HTTPS após a conclusão da consulta, não durante a execução da consulta. O problema ocorre porque o Tez AM não consegue ler a configuração relevante do TrustStore ao chamar o endpoint do serviço shuffle handler. No entanto, isso afeta apenas a limpeza dos dados aleatórios durante a limpeza do DAG. A limpeza no nível do aplicativo (AM) acontece de qualquer maneira e limpa todos os dados aleatórios remanescentes. Portanto, isso não leva ao acúmulo aleatório de dados.

Versão fixa: — EMR 7.3.0

Solução alternativa — adicione a seguinte configuração SSL ao tez-site.xml:

<property>
    <name>ssl.client.truststore.location</name>
    <value>{SSL_TRUSTSTORE_LOCATION}</value>
</property>