Distribución de la actividad de escritura de forma eficiente al cargar los datos - Amazon DynamoDB

Distribución de la actividad de escritura de forma eficiente al cargar los datos

Normalmente, cuando carga datos de otros orígenes de datos, Amazon DynamoDB particiona los datos de la tabla en varios servidores. Obtendrá un rendimiento mejor si carga los datos en todos los servidores asignados al mismo tiempo.

Por ejemplo, suponga que desea cargar mensajes de usuarios en una tabla de DynamoDB que utilice una clave principal compuesta con UserID como clave de partición y MessageID como clave de clasificación.

Cuando cargue los datos, un enfoque que puede tomar es cargar todos los elementos de mensaje para cada usuario, un usuario tras otro:

UserID MessageID

U1

1

U1 2
U1 ...
U1 ... hasta 100

U2

1

U2 2
U2 ...
U2 ... hasta 200

El problema en este caso es que no está distribuyendo las solicitudes de escritura a DynamoDB entre los valores de clave de partición. Toma un valor de clave de partición a la vez y carga todos sus elementos, antes de pasar al siguiente valor de clave de partición y hacer lo mismo.

En segundo plano, DynamoDB particiona los datos de las tablas entre varios servidores. Para utilizar toda la capacidad de rendimiento que se ha aprovisionado para la tabla, debe distribuir la carga de trabajo entre los valores de clave de partición. Al dirigir una cantidad desigual de carga a elementos que tienen el mismo valor de clave de partición, es posible que no pueda utilizar plenamente los recursos que DynamoDB ha aprovisionado para la tabla.

Puede distribuir el trabajo de carga utilizando la clave de ordenación para cargar un elemento de cada valor de clave de partición, luego otro elemento de cada valor de clave de partición y así sucesivamente:

UserID MessageID

U1

1

U2 1
U3 1
... ...

U1

2

U2 2
U3 2
... ...

Cada carga que se lleva a cabo en esta secuencia utiliza un valor de clave de partición distinto, por lo que más servidores de DynamoDB están ocupados simultáneamente mejorando así el rendimiento.