Refresh papers and define Agent evaluation

This commit is contained in:
wuyang
2026-07-27 16:28:23 +08:00
parent 8e4ff3779b
commit df475e8d90
180 changed files with 31313 additions and 160 deletions
+17
View File
@@ -63,6 +63,23 @@ python3 tools/collection/collect_arxiv.py \
- 自动分层:生成 `queued` 条目,后续人工精读后再升级状态。
- API 退避:遇到 arXiv 429 或临时网络错误时按 `--retries``--retry-sleep` 重试。
`export.arxiv.org` API 不可用时,可以使用 arXiv 官方搜索页面后端:
```bash
python3 tools/collection/collect_arxiv.py \
--backend search-html \
--from-date 2026-07-09 \
--to-date 2026-07-27 \
--per-query 300 \
--page-size 100 \
--request-timeout 120 \
--dry-run
```
`--dry-run` 不写 `papers/items/`,但会保存候选和选择 manifest。之后使用
`promote_arxiv_manifest.py` 按本地阈值入库。API 和 HTML 后端使用相同的分类、去重和
manifest schema。
## Method
1. 搜索或导入资料。