Arxiv Paper Reader

从 arxiv 论文的 HTML 页面抓取并提取全文纯文本。arxiv 的 HTML 版本比 PDF 更容易程序化提取，且包含完整内容。

适用场景

• 用户给出 arxiv 论文 ID 或 URL，要求阅读/分析论文内容
• 需要获取论文的完整文本用于笔记整理、技术分析
• WebFetch 工具无法直接访问 arxiv 页面时的替代方案

核心原理

arxiv 论文有两种可读格式：

1. abs 页面：https://arxiv.org/abs/<ID> — 只有摘要
2. HTML 页面：https://arxiv.org/html/<ID>v1 — 完整论文文本（LaTeXML 渲染）

HTML 页面是完整论文的网页版，可通过 curl 获取后提取纯文本。这比 PDF 解析更可靠。

使用步骤

1. 从用户输入中提取 arxiv ID（如 2507.02259）
2. 运行脚本：

python .trae/skills/arxiv-paper-reader/scripts/arxiv_reader.py <arxiv_id_or_url>

3. 可选参数：
   • --output FILE：保存到文件（默认输出到 stdout）
   • --sections：添加章节分隔符
   • --raw：跳过数学符号清理

示例

# 基本用法
python .trae/skills/arxiv-paper-reader/scripts/arxiv_reader.py 2507.02259

# 从 URL 提取
python .trae/skills/arxiv-paper-reader/scripts/arxiv_reader.py https://arxiv.org/abs/2507.02259

# 保存到文件并添加章节分隔
python .trae/skills/arxiv-paper-reader/scripts/arxiv_reader.py 2507.02259 --output /tmp/paper.txt --sections

# 读取后用 Read 工具分段查看
python .trae/skills/arxiv-paper-reader/scripts/arxiv_reader.py 2507.02259 --output /tmp/paper.txt
# 然后 Read /tmp/paper.txt

输出说明

• 纯文本格式，保留论文的章节结构
• 数学公式会被简化清理（LaTeXML 渲染的 LaTeX 标记会被部分还原）
• 包含标题、摘要、正文、参考文献等完整内容

注意事项

• 依赖 curl 命令（macOS/Linux 默认可用）
• 部分论文可能没有 HTML 版本（较老的论文），此时脚本会报错
• 版本号默认使用 v1，如需其他版本可手动构造 URL
• 对于超长论文，建议 --output 保存到文件后用 Read 工具分段查看