在数据工程领域,平衡不断增长的数据量与最大限度减少环境影响的需求一直是一项复杂的挑战。然而,法国领先的数据工程公司 Modeo 已成功将这一挑战转化为机遇。
Modeo 因其强大的数据工程基础设施而闻名,其服务深受欧莱雅、Silvr 和玛诺玛诺等行业领导者的信赖。他们最新的解决方案 Stash 利用 ClickHouse 的可扩展性和存储效率,提供可持续的数据管理。
Modeo 面临的挑战是在管理不断增长的数据量的同时,准确衡量数据使用和存储产生的实时碳排放量。作为关注气候变化的企业社会责任倡议的一部分,Modeo 的首席技术官 Ismael Goulani 表示,需要一种解决方案,使其客户能够监控和优化其数据平台的成本、碳足迹和使用情况。
Stash 介绍,由 ClickHouse 驱动
Modeo 推出了 Stash,这是一种旨在将客户数据平台中的元数据和日志同步到 ClickHouse 的解决方案。ClickHouse 以其低延迟、高吞吐量和高效的存储能力而闻名,它使 Stash 能够提供无与伦比的服务。“我们相信,随着更多数据驱动型企业出现,数据消费者将呈指数级增长。Stash 通过提供对其数据使用情况和成本的洞察力,帮助我们的客户可持续地管理这种增长,最终带来更好的业务成果和数据采用,”Goulani 解释道。
此屏幕截图显示了平台上用户活动的计数。“活动”包括各种交互,例如运行查询或打开仪表板。这种监控允许用户跟踪他们的使用模式、相关成本以及随时间推移产生的碳足迹。
Stash 架构
Stash 与 ClickHouse Cloud 集成。所有日志和元数据首先加载到对象存储(Google 云存储)中。然后将其加载并压缩到 ClickHouse 中以实现高效存储。
为什么选择 ClickHouse?理想的数据仓库解决方案
Modeo 需要一个可以快速检索数据并高效存储数据的系统。ClickHouse 以其独特的结构满足了这一要求,该结构允许快速数据访问和出色的数据压缩以实现高效存储。这些关键特性使 ClickHouse 成为 Modeo 苛刻要求的首选。
当被问及 Modeo 为什么选择 ClickHouse 作为 Stash 时,Goulani 说:“我们评估了多种数据仓库解决方案的可扩展性、实时分析和客户满意度。ClickHouse 在所有这些参数上都优于竞争对手。”
Goulani 进一步强调:“ClickHouse 的高可扩展性、处理海量数据的能力以及高效的存储使其成为我们的理想解决方案。我们的客户特别赞赏 ClickHouse 提供的低延迟和实时分析功能。”
除了这些优势之外,ClickHouse 在其他方面也很出色,这些方面对于他们的选择过程至关重要。其成本效益是一项主要优势,使 Modeo 能够在不增加运营费用的情况下维护强大的数据仓库解决方案。它还提供全面的 SQL 支持,这实现了与现有工具的无缝集成,并方便了其开发人员对数据进行轻松操作。此外,其直观的设计和用户友好的界面极大地提高了易用性,减少了新团队成员的学习曲线,并促进了高效的工作流程。通过 ClickHouse,Modeo 找到了一个不仅满足他们当前需求,而且还为未来需求提供适应性的解决方案。
看到成果:成本降低和数据采用率提高
ClickHouse 的实施为 Modeo 带来了显着的好处。“自从引入 ClickHouse 以来,我们看到客户的成本显着降低、数据采用率提高以及业务成果得到增强,”Goulani 报告说。“我们正在将 Stash 作为 beta 版推出,我们热切期待随着更多客户开始使用它而分享更多影响数据。”
ClickHouse 用于可持续和高效的数据管理
ClickHouse 改变了 Modeo 的数据管理方式。正如 Goulani 总结的那样,“借助 ClickHouse,我们不仅在管理数据;我们还在可持续且高效地这样做,这带来了更好的业务成果和数据采用。”
随着各行业对数据和访问监控的需求激增,Modeo 计划通过其 Stash 平台最大限度地发挥 ClickHouse 的功能。一个关键重点是利用其实时处理能力来满足一系列新兴应用,尤其是在安全领域。借助 ClickHouse,Modeo 可以构建复杂的系统,及时检测未经授权的数据资产访问(如表、数据库等),从而增强平台的防御机制并培养客户信任。这种集成使 Modeo 能够增强其服务,提供日益安全且用户友好的平台。