快捷方式

transformed_env_constructor

torchrl.trainers.helpers.transformed_env_constructor(cfg: DictConfig, video_tag: str = '', logger: Optional[Logger] = None, stats: Optional[dict] = None, norm_obs_only: bool = False, use_env_creator: bool = False, custom_env_maker: Optional[Callable] = None, custom_env: Optional[EnvBase] = None, return_transformed_envs: bool = True, action_dim_gsde: Optional[int] = None, state_dim_gsde: Optional[int] = None, batch_dims: Optional[int] = 0, obs_norm_state_dict: Optional[dict] = None) Union[Callable, EnvCreator][源代码]

从使用适当解析器构造函数构建的 argparse.Namespace 返回环境创建器。

参数:
  • cfg (DictConfig) – 包含脚本参数的 DictConfig。

  • video_tag (str, optional) – 要传递给 Logger 对象的视频标签

  • logger (Logger, optional) – 与脚本关联的日志记录器

  • stats (dict, optional) – 包含 ObservationNorm 变换的 locscale 的字典

  • norm_obs_only (bool, optional) – 如果为 True 且使用 VecNorm,则奖励不会被在线归一化。默认为 False

  • use_env_creator (bool, optional) – 是否应使用 EnvCreator 类。通过使用 EnvCreator,可以确保将运行统计信息放入共享内存,并在使用 VecNorm 变换时供所有工作者访问。默认为 True

  • custom_env_maker (callable, optional) – 如果您的环境创建器不属于 torchrl 环境包装器,则可以改为此处传递自定义可调用对象。在这种情况下,它将覆盖从 args 中检索到的构造函数。

  • custom_env (EnvBase, optional) – 如果需要转换现有环境,可以直接将其传递给此辅助函数。 custom_env_makercustom_env 是互斥的特性。

  • return_transformed_envs (bool, optional) – 如果为 True,则返回一个转换后的环境。

  • action_dim_gsde (int, Optional) – 如果使用 gSDE,则可以表示用于初始化噪声的动作维度。请确保在并行执行的环境中指明此项。

  • state_dim_gsde – 如果使用 gSDE,则可以表示用于初始化噪声的状态维度。请确保在并行执行的环境中指明此项。

  • batch_dims (int, optional) – 数据批次的维度数。如果使用单个环境,则应为 0(默认)。如果并行转换多个环境,则应设置为 1(或批次维度的数量)。

  • obs_norm_state_dict (dict, optional) – 要加载到环境中的 ObservationNorm 变换的 state_dict

文档

访问全面的 PyTorch 开发者文档

查看文档

教程

为初学者和高级开发者提供深入的教程

查看教程

资源

查找开发资源并让您的问题得到解答

查看资源