DynamoDB: RCU WCU Partitions Throttling, Transactions

Question 1

Что нужно знать о DynamoDB Partitions и RCU WCU?

Answer 1

RCU и WCU распределяются между partition’ами РАВНОМЕРНО

Например:
- есть 10 partition’ов
- выделено 10 RCU и 10 WCU
- каждый partition будет иметь по одному RCU и по одному WCU

Question 2

Зачем знать, что RCU WCU распределены между Partitions равномерно?

Answer 2

Троглинг часто связан с избыточной нагрузкой на какой-то один конкретный partition, чем на всю таблицу.

• Hot Key - несоразмерно много item’ов с определённым partition key
• Hot Partition

Question 3

Какие решения есть у проблемы Троттлинга DynamoDB?

Answer 3

• Exponential Backoff Retry (включен в SDK)
• Сделать распределение Partition Ключей более РАВНОМЕРНЫМ
• DynamoDB Accelerator DAX (если проблема в RCU)

Question 4

Ключевые слова для DynamoDB Transactions

Answer 4

Consistency, ACID, “all or nothing”

Question 5

Где НЕ работают транзакции DynamoDB? Почему?

Answer 5

Транзакции НЕ работают на глобальных таблицах (replication).
Потому что сложно организовать транзакцию на системе с распределёнными между AZ узлами.

Question 6

Транзакции потребляют … RCU и WCU

Answer 6

ВДВОЕ (2x) больше, чем обычная операция

Question 7

Вычисления
1 WCU =

Answer 7

записать 1 KB/sec данных

Question 8

Вычисления
1 RCU =

Answer 8

• прочитать 4 KB/sec данных методом Strongly Consistent
• ДВАЖДЫ прочитать 4 KB/sec данных методом Eventually Consistent

Question 9

Вычисления
Нужно писать 3 item’а в секунду ТРАНЗАКЦИОННО, каждый размером 5 KB
Сколько WCU?

Answer 9

3 item/sec * 5 KB * 2 (transactional cost) = 30 WCU

Question 10

Вычисления
Нужно читать 5 item’ов в секунду ТРАНЗАКЦИОННО, каждый размером 5 KB
Сколько RCU?

Answer 10

Решение: транзакционное чтение подразумевает Strongly Consistent.
Округляем 5 KB до 8 KB.

5 item/sec * (8 KB / 4 KB) * 2 (transactional cost) = 20 WCU