三年前，我们开源了Quickwit，一个面向大规模数据集的分布式搜索引擎。我们的目标很宏大：创建一种全新的全文搜索引擎，其成本效率比Elasticsearch高十倍，配置和管理显著更简单，并且能够扩展到PB级别的数据。
-
https://quickwit.io/blog/quickwit-first-release
虽然我们知道Quickwit的潜力，但我们通常测试的数据量不超过
100TB
，索引吞吐量不超过
1GB/s
。我们缺乏现实世界中的数据集和计算资源来测试Quickwit在多PB规模下的表现。
在这篇博客文章中，我将与大家分享币安是如何构建PB级别的日志服务以及如何克服将Quickwit扩展到多PB规模时遇到的挑战。
