ray.rllib.utils.replay_buffers.replay_buffer.存储单元#

class ray.rllib.utils.replay_buffers.replay_buffer.StorageUnit(value, names=None, *, module=None, qualname=None, type=None, start=1, boundary=None)[源代码]#

基类:Enum

指定如何在 ReplayBuffer 中组织批次。

timesteps: 每个时间步一个缓冲槽。sequences: 每个序列一个缓冲槽。episodes: 每个片段一个缓冲槽。fragments: 每个传入批次一个缓冲槽。

开发者API: 此API可能会在Ray的次要版本之间发生变化。

属性

TIMESTEPS

SEQUENCES

EPISODES

FRAGMENTS