LLaMA-13B 多数基准超 GPT-3,权重泄露终结大厂垄断
alex_verem · x · 2026-10-13
线程第 3 篇:Meta 的 LLaMA(arXiv 2302.13971),7B–65B 基础模型系列,仅用公开数据集训练数万亿 token。LLaMA-13B 在多数基准上超越 175B 的 GPT-3,LLaMA-65B 与 Chinchilla-70B、PaLM-540B 相当。推文强调其权重在发布一周内泄露,开源社区由此打破大厂对前沿模型的垄断。
「研究」频道最新
- 数学Discord社区推出免费机器学习工作坊，10月17日开课 — zeroalephzeta · 2026-10-13
- 无需哈希表零额外内存，ciphergoth 开源 O(k log k) 无放回采样算法 — burny_tech · 2026-10-13
- 新论文用欠阻尼二阶动力学解释 Mamba-3 状态旋转的振荡作用 — tri_dao · 2026-10-13
- Cirillo 新论文给出首违约篮子互换的精确定价与风险归因框架 — DrCirillo · 2026-10-13
- 一张分层图论推理算法,你能认出图中画的是什么吗 — Sauers_ · 2026-10-13
- Google 团队提出 VIS-Ground：让交互式视频生成正确锚定上下文 — GoogIe · 2026-10-13