Sublime

大语言模型显卡天梯光速更新，新增了老黄刚刚发布的 NVIDIA Project DIGITS 128GB 桌面超级计算机。好消息是，单台就能跑70b级别的模型，坏消息是，跟MacBook M4 Pro 差不多.... 都是 LPDDR5X。[1/2] 天梯地址：https://t.co/y2UTMoHmSG... See more

Deepseek使用的GRPO算法与传统 PPO算法（的区别、动机以及工作流程。 GRPO 的本质思路：通过在同一个问题上生成多条回答，把它们彼此之间做“相对比较”，来代替传统 PPO 中的“价值模型”。 这种方法减轻了估计价值函数的负担，且对于很多需要对语言输出进行精细评价的场景（如写文章、对话回答、内容审核），往往更灵活、训练速度更快。