填坑！线上Presto查询Hudi表异常排查

背景

最近我们使用Presto来查询Hudi表的时候，遇到了一些异常。我们的查询语句没有任何错误，但是查询结果始终为0，而且并没有任何报错信息。针对这个问题，我们进行了一些排查并解决了问题。在这里，我们分享一下我们的排查过程和解决方法。

排查过程

首先我们检查了数据是否有问题，使用Hadoop FSCK命令查看文件系统是否有错误。结果显示，HDFS没有错误。接着我们针对查询语句进行了全面的检查，也没有发现任何问题。

这时我们怀疑是Presto的问题，于是我们查看了Presto的日志和配置文件。在日志中发现，Presto无法读取Hudi表中的数据，因为Hudi的名称节点（NameNode）中缺少Hudi的元数据。经过我们的分析，我们认为可能是Hudi元数据不正确导致Presto无法读取数据。

接着我们尝试手动在NameNode中重新加载Hudi元数据，并重新启动Presto。但是，这个过程过程很慢且效果并不理想，仍然无法解决问题。

紧接着，我们尝试了另一种方法：我们手动停止了Presto，并清理了Presto缓存，然后重新启动Presto，并重新执行查询。这一次查询成功了，Presto可以正确的读取Hudi表中的数据。

解决方案

根据我们的经验，以下是一些关于Presto和Hudi的最佳实践：

1. 注意Hudi元数据的准确性，确保其能够被正确的访问以支持外部查询。
2. 定期清理Presto缓存。
3. 如果您遇到了类似的问题，请尝试停止Presto并清理缓存，然后重新启动Presto。

## 结语

通过以上的排查过程，我们解决了在线上Presto查询Hudi表异常的问题。未来，我们将继续关注Presto和Hudi相关问题，并分享我们的经验和最佳实践。希望本文能够帮助到遇到类似问题的读者们。