跳转到主要内容
跳转到主要内容
编辑此页面

内存超额分配

内存超额分配是一种实验性技术,旨在为查询设置更灵活的内存限制。

这项技术的想法是引入可以表示查询可以使用的保证内存量的设置。当启用内存超额分配并且达到内存限制时,ClickHouse 将选择超额分配最多的查询,并尝试通过终止此查询来释放内存。

当达到内存限制时,任何查询在尝试分配新内存期间都将等待一段时间。如果超时已过且内存已释放,则查询继续执行。否则,将抛出异常并终止查询。

停止或终止查询的选择由全局或用户超额分配跟踪器执行,具体取决于达到哪个内存限制。如果超额分配跟踪器无法选择要停止的查询,则会抛出 MEMORY_LIMIT_EXCEEDED 异常。

用户超额分配跟踪器

用户超额分配跟踪器在用户的查询列表中查找超额分配比率最高的查询。查询的超额分配比率计算为已分配的字节数除以 memory_overcommit_ratio_denominator 设置的值。

如果查询的 memory_overcommit_ratio_denominator 等于零,则超额分配跟踪器将不会选择此查询。

等待超时由 memory_usage_overcommit_max_wait_microseconds 设置设置。

示例

SELECT number FROM numbers(1000) GROUP BY number SETTINGS memory_overcommit_ratio_denominator=4000, memory_usage_overcommit_max_wait_microseconds=500

全局超额分配跟踪器

全局超额分配跟踪器在所有查询的列表中查找超额分配比率最高的查询。在这种情况下,超额分配比率计算为已分配的字节数除以 memory_overcommit_ratio_denominator_for_user 设置的值。

如果查询的 memory_overcommit_ratio_denominator_for_user 等于零,则超额分配跟踪器将不会选择此查询。

等待超时由配置文件中的 memory_usage_overcommit_max_wait_microseconds 参数设置。