内存超配
内存超配是一种实验性技术,旨在允许为查询设置更灵活的内存限制。
此技术的思路是引入可以表示查询可以使用内存保证量的设置。当启用内存超配并达到内存限制时,ClickHouse 将选择超配程度最高的查询,并尝试通过终止该查询来释放内存。
当达到内存限制时,任何查询在尝试分配新内存时都会等待一段时间。如果超时并释放了内存,则查询继续执行。否则,将抛出异常并终止查询。
停止或终止查询的选择由全局或用户超配跟踪器执行,具体取决于达到哪个内存限制。如果超配跟踪器无法选择要停止的查询,则会抛出 MEMORY_LIMIT_EXCEEDED 异常。
用户超配跟踪器
用户超配跟踪器在用户的查询列表中查找超配比率最大的查询。查询的超配比率计算为已分配的字节数除以 memory_overcommit_ratio_denominator
设置的值。
如果查询的 memory_overcommit_ratio_denominator
等于零,则超配跟踪器将不会选择此查询。
等待超时由 memory_usage_overcommit_max_wait_microseconds
设置设置。
示例
SELECT number FROM numbers(1000) GROUP BY number SETTINGS memory_overcommit_ratio_denominator=4000, memory_usage_overcommit_max_wait_microseconds=500
全局超配跟踪器
全局超配跟踪器在所有查询列表中查找超配比率最大的查询。在这种情况下,超配比率计算为已分配的字节数除以 memory_overcommit_ratio_denominator_for_user
设置的值。
如果查询的 memory_overcommit_ratio_denominator_for_user
等于零,则超配跟踪器将不会选择此查询。
等待超时由配置文件中的 memory_usage_overcommit_max_wait_microseconds
参数设置。