分布式系统RetryCache机制

前言

在分布式系统实际运行过程中，网络环境的不稳定性（如网络延迟或超时）常常会导致客户端请求未能及时获得响应，此类现象并不少见。当发生这种低概率事件时，客户端无法准确判断其请求是否已被服务器端成功处理，因此只能基于最坏情况（即假设请求未被处理）执行重试机制。然而，问题的关键在于，对于非幂等性操作而言，重复执行可能会产生与原始操作不同的结果。此时若服务器端已成功处理了客户端的首次请求，则不应再对第二次请求进行处理。本文将探讨一种针对非幂等操作的重试缓存机制——RetryCache，通过引入该机制可有效防止重复请求被误处理的情况发生。

非幂等操作重复处理问题分析

此处有必要再次探讨非幂等操作在被重复执行时可能引发的潜在问题。

总体而言，这些问题主要体现在以下几个方面：

1. Application端由于接收到Server返回的异常信息，从而导致Application运行失败。对于非幂等类型的操作，若请求被Server端重复处理，可能会产生错误的结果。例如，在重复执行创建文件的操作时，第二次请求将触发诸如FileAlreadyExistException之类的异常信息。

2. Server端metadata信息可能出现损坏。假设我们完成了一个create文件操作，并且该文件随后被相关任务读取并正常清理，但客户端的重试机制再次触发了该文件的创建