ray.rllib.utils.replay_buffers.reservoir_replay_buffer.ReservoirReplayBuffer.__init__#

ReservoirReplayBuffer.__init__(capacity: int = 10000, storage_unit: str = 'timesteps', **kwargs)[源代码]#

初始化一个 ReservoirBuffer 实例。

参数:

  • capacity – FIFO 缓冲区中存储的最大时间步数。达到此数量后，将丢弃较旧的样本以为新样本腾出空间。

  • storage_unit – 可以是 ‘timesteps’、’sequences’ 或 ‘episodes’。指定经验如何存储。