Scoop 是一个很优秀的软件包管理工具,官方的安装说明也简单易懂,但是在中国访问却可能在每个环节都会遇到无法下载的问题。依次会遇到的是: 首先从 GitHub Raw 下载 Scoop 安装脚本,此时下载会失败。 如果第一步成功后,会下载 Scoop 库存档和 Main 应用库存档 ...
agent 就是你写的那段程序,trainer 就是一个 actor,reward 是你在 Env 或 ChatAgent 里随手写的任意 Python。剩下的活儿三个大件全包了。README 里反复强调一个数字:大约 8600 行 RL 代码(推文里说的 9K 是个约数),却能撑到 1T 级别的 MoE。 OpenRLHF 的 ...