快捷方式

LLMOnDevice

class torchrl.modules.llm.LLMOnDevice(*args, bundle_indices: list | None = None, **kwargs)[source]

一个 vllm.LLM 的精简包装器,用于控制其放置设备。

文档

访问全面的 PyTorch 开发者文档

查看文档

教程

为初学者和高级开发者提供深入的教程

查看教程

资源

查找开发资源并让您的问题得到解答

查看资源