博客 / 工程

首篇 ClickHouse 研究论文:如何打造闪电般快速的现代数据分析数据库?

author avatar
ClickHouse 团队
2024 年 9 月 4 日 - 6 分钟阅读

我们很高兴地宣布,首篇 ClickHouse 研究论文已被接受,现在已在 VLDB 上发表

VLDB——国际超大型数据库会议——被广泛认为是数据管理领域领先的会议之一。在数百篇投稿中,VLDB 的平均接受率约为 ~20%

今年,VLDB 2024 在中国广州举行,标志着该会议的 50 周年,使其成为历史最悠久的数据管理会议之一。

VLDB 2024 Research paper.002.png

本次会议 展出 了 250 场论文演示和 10 场关于最新研究和行业趋势的配套研讨会。

今年的主导话题是各种形式的机器学习,但也涌现了许多核心数据库领域的论文,如查询引擎、存储和数据库理论。

VLDB 2024 Research paper.003.png

ClickHouse 论文的先睹为快

我们的出版物是数月跨职能努力的结晶,旨在为读者提供对 ClickHouse 最有趣的架构和系统设计组件的简明描述,正是这些组件使其如此之快。现在,这篇论文首次公开了。

在论文中,您将了解到

ClickHouse 的历史

本文中描述的主要功能何时引入 ClickHouse?未来计划有哪些功能和增强功能?

VLDB 2024 Research paper.004.png

ClickHouse 的架构

层、组件和执行模式。

VLDB 2024 Research paper.005.png

ClickHouse 的存储层

磁盘格式、数据修剪技术、合并时数据转换、更新和删除、幂等插入、数据复制和 ACID 合规性。

VLDB 2024 Research paper.006.png

ClickHouse 的查询处理层

SIMD 并行化、多核并行化、多节点并行化和性能优化技术。

VLDB 2024 Research paper.007.png

ClickHouse 的集成层

原生支持 90 多种文件格式和 50 多种与外部系统的集成。

VLDB 2024 Research paper.008.png

基准测试

ClickHouse 与其他常用分析数据库的性能比较。注意:数值越低越好。

VLDB 2024 Research paper.009.png

希望这能引起您的兴趣。如果您有兴趣,可以立即在此处阅读整篇论文(您可以滚动浏览页面)



VLDB 2024 上的 ClickHouse

论文演示

VLDB 2024 Research paper.010.png

我们的 CTO 兼 ClickHouse 的创建者 Alexey Milovidov 上周在广州展示了这篇论文(幻灯片在此),随后进行了问答环节(时间很快就用完了!)。您可以在此处观看录制的演示



海报展示

除了论文演示外,被 VLDB 接受的论文的作者还被要求进行海报展示。

VLDB 2024 Research paper.011.png

VLDB 2024 Research paper - poster.001.png



额外见面会演讲

幸运的是,我们在 VLDB 前几天还举办了 ClickHouse 广州用户组见面会。在那次见面会上,我们展示了 Alexey 会议演讲的扩展版本(幻灯片在此



从海岸到海岸——我们的首篇研究论文的旅程

我们以一个奖励章节结束,供好奇的读者了解我们首篇研究论文的幕后故事。

在 ClickHouse 于 2016 年开源后,其受欢迎程度不断提高,同时开发步伐也加快了。在过去的八年中,ClickHouse 团队一直专注于构建世界上最快的数据分析数据库,以至于没有时间发表关于 ClickHouse 的学术论文。

VLDB 2024 Research paper.012.png

然而,在 2023 年 10 月于法国里维埃拉迷人的地中海海岸线举行的 ClickHouse 公司场外会议期间,ClickHouse 产品和营销副总裁 Tanya Bragin 提出了最终撰写一篇关于 ClickHouse 的基础论文并将其提交给今年在中国广东省广州举行的 VLDB 的想法,广州位于南海北岸。

VLDB 2024 Research paper.013.png

我们迅速组建了一个由作者组成的小团队,虽然我们中的一些人已经在大学攻读博士学位时撰写过研究论文,但另一些人对此是新手。2023 年 11 月,我们开始了紧张的写作过程,几乎每天都有状态电话会议,因为论文作者居住在不同的地点。我们在 2024 年 4 月提交了最终版本。

VLDB 2024 Research paper.014.png

总结

VLDB 2024 Research paper.015.png

我们上周玩得很开心!除了丰盛美味的粤菜外,ClickHouse 团队上周还在中国广州参加了特别的 50 周年 VLDB 2024 会议,我们的 CTO 兼 ClickHouse 创建者 Alexey Milovidov 自豪地向科学界展示了我们的首篇 ClickHouse 研究论文。

我们希望您喜欢阅读这篇论文并观看 Alexey 演示的录像。我们很想听听您的想法。

最后,为了您的方便,这里列出了本文中提到的论文及其所有配套材料的链接

分享这篇文章

订阅我们的新闻通讯

随时了解功能发布、产品路线图、支持和云产品信息!
正在加载表单...
关注我们
X imageSlack imageGitHub image
Telegram imageMeetup imageRss image
©2025ClickHouse, Inc. 总部位于美国加利福尼亚州湾区和荷兰阿姆斯特丹。