用 Jev 审阅研究论文:可复核的清晰度检查

用 Jev Paper Judge 对照自己论文的两个版本,核对提取段落与评分标准,并自行验证结论和引用。

这份指南用来检查自己论文的表达是否清楚。Jev Paper Judge 从 PDF 提取文字,按章节和段落检查呈现是否易懂、必要信息是否齐全。它不判断研究结论是否正确,也不核验引文或决定论文能否发表。

做一个可复核的小实验

  1. 保存自己有权处理的两份草稿。A 是原稿;B 只删除“局限性”段落。其余正文、标题和 PDF 导出设置保持一致。不要上传保密稿件。
  2. 确认两份 PDF 的正文都能选中、复制,并能找到引言、方法、结果、结论标题。纯扫描图片不会自动 OCR。
  3. 按项目 README 在本地准备运行环境和自己的 TypeSafe API 密钥,用同一版本分别评估两份 PDF。在项目目录运行下面两条命令。
  4. 比较两份 JSON 报告中的章节提取、局限性条目和低置信度提示。如果意外改变了其他段落的提取,或标题识别失败,就不要用这次比较下结论。
  5. 修改论文之前,由作者或相关领域读者打开原文和引用资料复核。不要仅凭总分变化决定改稿。
pnpm judge original.pdf --json original.json
pnpm judge without-limitations.pdf --json without-limitations.json

判断结果是否有用

检查点可以采用的条件需要人工核对
文本提取两个版本的正文和章节顺序均可读表格、公式、标题及附录是否遗漏
局限性提示能追溯到改动的段落提示对这篇论文是否成立
不确定性低置信度提示被单独标记修改前重新阅读原文
事实和引文明确排除在自动评分之外另行核验主张、数字和原始引文

边界和数据处理

这是编辑对照练习,不是准确率测试。PDF 文本提取和标题识别有启发式误差。若修改项目的评分问题或权重,原有参考分布也需要重建。提取出的论文内容会发给 TypeSafe 进行评估;共同作者的未发表论文和保密资料,应先确认授权与数据处理条件。

Pydantic AI + Jev Examples 展示另一类用途:在代理接收输入或执行工具前插入类型化判断。它不是论文事实核验器。若把判断接到自动编辑或发布流程,仍需把建议和执行分开,并保留人工复核。

原始资料与核对日期

Jev Paper Judge 项目档案 · Pydantic AI + Jev 项目档案