Разработка метрик потребления ресурсов для распределенного хранилища YDB

Распределенное хранилище YDB имеет определенную пропускную способность, ограниченную ресурсами физических устройств в кластере и не может поддерживать низкое время отклика, если нагрузка превышает этот предел. В процессе эксплуатации кластеров YDB периодически возникает проблема с увеличением времени отклика распределенного хранилища, которая может быть связана как с превышением этой пропускной способности, так и с другими проблемами в системе. Чтобы облегчить диагностику в таких случаях и предоставить пользователям информацию об уровне использования ресурсов распределенного хранилища, мы разработали новые метрики, с помощью которых можно оценить, превышает ли объем подаваемой нагрузки пропускную способность физических устройств. Используя эти метрик, мы сформулировали необходимые условия для обеспечения гарантии низкого времени отклика распределенного хранилища YDB. Наличие такой гарантии позволит пользователям распределенного хранилища более точно балансировать свою нагрузку на группы хранения, чтобы избегать перегрузки и, следовательно, ухудшения времени обработки запросов.