我该如何腐烂$\epsilon$在 Q 学习中？

目前，我正在衰减 epsilon，如下所示。我初始化$\epsilon$为 1，然后，在每一集之后，我将它乘以一些$C$（随它去$0.999$)，当它达到$0.01$. 之后，我保持$\epsilon$成为$0.01$每时每刻。我认为这有一个可怕的后果。

所以，我需要一个$\epsilon$衰减算法。我还没有找到关于它的脚本或公式，你能告诉我吗？