整站 arXiv 搬上 HuggingFace:315 万篇论文,16TB 多格式数据集

secemp9 · x · 2026-09-20

开发者 secemp9 把整个 arXiv 站点打包成了 Hugging Face 上的公开数据集:共 3,148,796 篇论文,包含每个版本,提供 LaTeX 源文件、PDF、PostScript 和 HTML 多种格式,总体积约 16 TB。作者补充说明去重按版本计算,若计入版本总数超过 600 万。对需要大规模语料做训练、检索或文献分析的团队来说是一份难得的全量多格式资源。

所属事件:整站 arXiv 上架 Hugging Face:314 万篇论文 16TB(7 条相关)→

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →