@baimingtao/lbs-agent 1.0.0

package/extensions/skills/builtin/research/research-paper-writing/references/checklists.md

@@ -0,0 +1,434 @@
+# 会议论文检查清单
+
+此参考文档记录了主要 ML/AI 会议的强制检查清单要求。目前所有主要会议都要求提供论文检查清单——缺失将导致 desk rejection。
+
+---
+
+## 目录
+
+- [NeurIPS 论文检查清单](#neurips-paper-checklist)
+- [ICML 论文检查清单](#icml-paper-checklist)
+- [ICLR 要求](#iclr-requirements)
+- [ACL 要求](#acl-requirements)
+- [AAAI 要求](#aaai-requirements)
+- [COLM 要求](#colm-requirements)
+- [通用提交前检查清单](#universal-pre-submission-checklist)
+
+---
+
+## NeurIPS 论文检查清单
+
+### 强制组件
+
+所有 NeurIPS 投稿必须包含已填写的论文检查清单。缺乏此要素的论文将面临**自动 desk rejection**。该检查清单位于参考文献和补充材料之后，不计入页数限制。
+
+### 16 项必需的检查清单条目
+
+#### 1. 声明一致性
+作者必须验证摘要和引言中的声明是否与理论和实验结果相符，并明确说明贡献、假设和局限性。
+
+**检查内容：**
+- [ ] 摘要声明与实际结果相符
+- [ ] 引言没有过度承诺
+- [ ] 贡献具体且可证伪
+
+#### 2. 局限性讨论
+论文应包含专门的“Limitations”（局限性）章节，讨论强烈的假设、对违规情况的鲁棒性、范围限制以及影响性能的因素。
+
+**需包含的内容：**
+- [ ] 专门的 Limitations 章节
+- [ ] 对研究范围的诚实评估
+- [ ] 方法可能失效的条件
+
+#### 3. 理论与证明
+理论贡献需要完整的假设陈述和完整的证明（在正文或附录中提供用于启发直觉的证明草图）。
+
+**检查内容：**
+- [ ] 所有假设均已正式陈述
+- [ ] 提供了完整的证明（正文或附录）
+- [ ] 正文中包含用于启发直觉的证明草图
+
+#### 4. 可重复性
+作者必须描述确保通过代码发布、详细说明、模型访问或符合其贡献类型的 checkpoints 来验证结果的步骤。
+
+**需提供的内容：**
+- [ ] 清晰的可重复性声明
+- [ ] 代码可用性信息
+- [ ] 模型 checkpoints（如适用）
+
+#### 5. 数据与代码访问
+应提供用于复现主要实验结果的说明（补充材料或 URL），包括确切的命令和环境规范。
+
+**需包含的内容：**
+- [ ] 运行实验的确切命令
+- [ ] 环境规范（requirements.txt、conda env）
+- [ ] 数据访问说明
+
+#### 6. 实验细节
+论文必须在正文或补充材料中指定训练细节：数据集划分、超参数和选择方法。
+
+**需记录的内容：**
+- [ ] Train/val/test 划分细节
+- [ ] 使用的所有超参数
+- [ ] 超参数选择方法
+
+#### 7. 统计显著性
+结果需要包含误差棒、置信区间或统计检验，并明确说明计算方法和基本假设。
+
+**需包含的内容：**
+- [ ] 误差棒或置信区间
+- [ ] 运行次数/seeds 数量
+- [ ] 计算方法（std dev vs std error）
+
+#### 8. 计算资源
+所需规范：计算节点类型（CPU/GPU）、内存、存储、每次运行的执行时间以及项目的总计算需求。
+
+**需记录的内容：**
+- [ ] GPU 类型和数量
+- [ ] 每次运行的训练时间
+- [ ] 使用的总算力
+
+#### 9. 伦理准则合规性
+作者确认遵守 NeurIPS Code of Ethics，并注明任何必要的偏离。
+
+**需验证的内容：**
+- [ ] 已阅读 NeurIPS Code of Ethics
+- [ ] 确认合规
+- [ ] 注明任何带有正当理由的偏离
+
+#### 10. 广泛影响
+在适用时讨论潜在的负面社会应用、公平性问题、隐私风险以及可能的缓解策略。
+
+**需讨论的内容：**
+- [ ] 潜在的负面应用
+- [ ] 公平性考量
+- [ ] 隐私影响
+- [ ] 缓解策略
+
+#### 11. 安全防范措施
+高风险模型（语言模型、抓取互联网获取的数据集）需要受控的发布机制和使用指南。
+
+**需考虑的内容：**
+- [ ] 敏感模型的发布策略
+- [ ] 必要时的用法指南
+- [ ] 适当的访问控制
+
+#### 12. 尊重许可证
+所有现有资产都需要创建者引用、许可证名称、URL、版本号以及服务条款确认。
+
+**需记录的内容：**
+- [ ] 引用了数据集许可证
+- [ ] 尊重了代码许可证
+- [ ] 包含了版本号
+
+#### 13. 资产文档记录
+新发布的资源需要结构化模板来记录训练细节、局限性、同意程序和许可信息。
+
+**对于新数据集/模型：**
+- [ ] Datasheet 或 model card
+- [ ] 训练数据文档记录
+- [ ] 已知局限性
+
+#### 14. 人类受试者
+众包研究必须包含参与者说明、截图、报酬细节，并遵守最低工资要求。
+
+**需包含的内容：**
+- [ ] 任务说明
+- [ ] 报酬细节
+- [ ] 时间估计
+
+#### 15. IRB 批准
+人类受试者研究需要提供机构审查委员会 (IRB) 或同等机构的书面批准文件，并披露风险描述（在投稿时保持匿名）。
+
+**需验证的内容：**
+- [ ] 已获得 IRB 批准
+- [ ] 已完成风险评估
+- [ ] 投稿时已作匿名化处理
+
+#### 16. LLM 声明
+将大语言模型作为核心方法论组件使用时需要进行披露；用于写作/编辑则无需声明。
+
+**需披露的内容：**
+- [ ] 作为核心方法论组件使用的 LLM
+- [ ] LLM 的具体使用方式
+- [ ] （写作辅助不需要披露）
+
+### 回复格式
+
+作者为每个问题选择“是”、“否”或“N/A”，并可选提供 1-2 句的正当理由。
+
+**重要提示：** 明确指示审稿人不要因为诚实的局限性承认而进行惩罚。
+
+---
+
+## ICML 论文检查清单
+
+### 广泛影响声明
+
+ICML 要求在论文末尾、参考文献之前提供 Broader Impact Statement（广泛影响声明）。该部分不计入页数限制。
+
+**必需要素：**
+- 潜在的正面影响
+- 潜在的负面影响
+- 缓解策略
+- 可能受影响的人群
+
+### ICML 特定要求
+
+#### 可重复性检查清单
+
+- [ ] 明确指定了数据集划分
+- [ ] 列出了超参数
+- [ ] 记录了搜索范围
+- [ ] 解释了选择方法
+- [ ] 指定了计算资源
+- [ ] 声明了代码可用性
+
+#### 统计报告
+
+- [ ] 所有图表均包含误差棒
+- [ ] 明确指定了使用标准差还是标准误
+- [ ] 说明了运行次数
+- [ ] 如果对比了不同方法，需提供显著性检验
+
+#### 匿名化
+
+- [ ] 论文中未出现作者姓名
+- [ ] 未包含致谢
+- [ ] 未包含基金编号
+- [ ] 引用先前工作时使用第三人称
+- [ ] 无可识别的仓库 URL
+
+---
+
+## ICLR 要求
+
+### LLM 披露政策（2026 年新增）
+
+ICLR 有特定的 LLM 披露要求：
+
+> "If LLMs played a significant role in research ideation and/or writing to the extent that they could be regarded as a contributor, authors must describe their precise role in a separate appendix section."
+
+**需要披露的情况：**
+- LLM 用于重要的研究构思
+- LLM 用于实质性的写作
+- LLM 可被视为贡献者
+
+**无需披露的情况：**
+- 语法检查
+- 少量的编辑辅助
+- 代码补全工具
+
+**未披露的后果：**
+- Desk rejection
+- 潜在的发表后问题
+
+### ICLR 特定要求
+
+#### 可重复性声明（可选但推荐）
+
+添加一条声明，提及：
+- 支持材料
+- 代码可用性
+- 数据可用性
+- 模型 checkpoints
+
+#### 伦理声明（可选）
+
+在 ≤1 页的篇幅内讨论潜在问题。不计入页数限制。
+
+#### 互惠审稿
+
+- 拥有 3 篇及以上论文的作者必须担任 ≥6 篇论文的审稿人
+- 每份投稿需要 ≥1 名作者注册并审稿 ≥3 篇论文
+
+---
+
+## ACL 要求
+
+### 局限性章节（强制）
+
+ACL 明确要求提供 Limitations（局限性）章节：
+
+**需包含的内容：**
+- 做出的强烈假设
+- 范围局限
+- 方法何时可能失效
+- 泛化性问题
+
+**重要提示：** Limitations 章节不计入页数限制。
+
+### ACL 特定检查清单
+
+#### 负责任的 NLP 研究
+
+- [ ] 讨论了偏见考量
+- [ ] 如适用，评估了公平性
+- [ ] 讨论了双用途风险
+
+#### 多语言考量
+
+如适用：
+- [ ] 讨论了语言多样性
+- [ ] 包含了非英语语言
+- [ ] 验证了翻译质量
+
+#### 人工评估
+
+如适用：
+- [ ] 提供了标注者详细信息
+- [ ] 报告了标注者一致性指标
+- [ ] 记录了报酬情况
+
+---
+
+## AAAI 要求
+
+### 格式要求（所有会议中最严格）
+
+AAAI 执行格式规则的严格程度超过任何其他主要会议。偏离模板的论文将遭到 desk rejection。
+
+- [ ] 使用 **完全原版的** AAAI 样式文件，不得修改 —— 不能使用 `\setlength`，不能使用 `\vspace` 技巧，不能覆盖字体
+- [ ] 正文内容限 7 页（最终版包含作者信息时为 8 页）
+- [ ] 双栏格式，Times 字体（由模板设置）
+- [ ] 参考文献和附录不计入页数限制
+- [ ] 摘要必须是单一段落
+- [ ] 不要修改页边距、栏宽或字体大小
+
+### 必需章节
+
+- [ ] Abstract（单一段落，无数学公式或引用）
+- [ ] Introduction（包含清晰的贡献声明）
+- [ ] AAAI 格式的 References（使用 `aaai2026.bst`）
+- [ ] Appendix（可选，无限制）
+
+### 伦理与可重复性
+
+- [ ] Broader impact statement（鼓励但不总是强制 —— 需查看当年的 CFP）
+- [ ] 可重复性细节（数据集、代码可用性）
+- [ ] 如适用，需确认使用了 AI 写作工具
+
+### 与其他会议的主要区别
+
+- **不需要单独的 limitations 章节**（与 ACL 不同），但建议讨论局限性
+- **最严格的格式执行** —— 样式检查器会拒绝不合规的 PDF
+- **没有**类似 NeurIPS 的论文检查清单，但下方的通用检查清单仍然适用
+- **统一模板**，正文和补充材料在同一文件中
+
+---
+
+## COLM 要求
+
+### 概览
+
+COLM (Conference on Language Modeling) 专门聚焦于语言模型研究。论文立意必须针对该研究群体。
+
+### 格式要求
+
+- [ ] 正文内容限 9 页（最终版 10 页）
+- [ ] 使用 COLM 模板（基于 ICLR 模板并进行了修改）
+- [ ] 双盲审稿
+- [ ] 参考文献和附录无限制
+
+### 必需章节
+
+- [ ] Abstract
+- [ ] 为语言建模群体立意的 Introduction
+- [ ] Conclusion
+- [ ] References
+
+### 内容期望
+
+- [ ] 贡献必须与语言模型相关（广义解释：训练、评估、应用、理论、alignment、安全）
+- [ ] 如果方法是通用的，需结合语言模型示例进行说明
+- [ ] 如适用，Baselines 应包含近期的 LM 特定方法
+
+### 与其他会议的主要区别
+
+- **范围比** NeurIPS/ICML **窄** —— 必须针对 LM 群体进行立意
+- **模板衍生自** ICLR **（derived from ICLR）** —— 格式规则类似
+- **较新的会议** —— 审稿规范仍在建立中；倾向于进行更详尽的评估
+- **没有**类似 NeurIPS 的强制检查清单，但期望进行广泛影响讨论
+- **LLM 披露**：如果在研究中使用了 LLM（代码生成、数据标注、写作辅助），需进行披露
+
+---
+
+## 通用提交前检查清单
+
+### 每次投稿前
+
+#### 论文内容
+
+- [ ] Abstract 在字数限制内（通常为 250-300 字）
+- [ ] 正文内容在页数限制内
+- [ ] 参考文献完整且已核实
+- [ ] 包含 Limitations 章节
+- [ ] 所有图表均带有标题
+- [ ] 标题具有自包含性
+
+#### 格式要求
+
+- [ ] 使用了正确的模板（特定于会议及年份）
+- [ ] 未修改页边距
+- [ ] 未修改字体大小
+- [ ] 满足双盲要求
+- [ ] 包含页码（用于审稿）或无页码（最终版）
+
+#### 技术要求
+
+- [ ] 所有声明均有证据支持
+- [ ] 包含误差棒
+- [ ] 基线对比恰当
+- [ ] 记录了超参数
+- [ ] 声明了计算资源
+
+#### 可重复性
+
+- [ ] 代码可用（或提供正当理由）
+- [ ] 数据可用（或提供正当理由）
+- [ ] 记录了环境
+- [ ] 提供了用于复现的命令
+
+#### 伦理
+
+- [ ] 考虑了广泛影响
+- [ ] 诚实地陈述了局限性
+- [ ] 尊重了许可证
+- [ ] 如需要，已获取 IRB 批准
+
+#### 最终检查
+
+- [ ] PDF 编译无错误
+- [ ] 所有图表正确渲染
+- [ ] 所有引文均可解析
+- [ ] 补充材料组织有序
+- [ ] 已完成会议检查清单
+
+---
+
+## 快速参考：页数限制
+
+| 会议 | 正文内容 | 参考文献 | 附录 |
+|------------|-------------|------------|----------|
+| NeurIPS 2025 | 9 页 | 无限制 | 无限制（检查清单单列） |
+| ICML 2026 | 8 页（最终版 +1） | 无限制 | 无限制 |
+| ICLR 2026 | 9 页（最终版 +1） | 无限制 | 无限制 |
+| ACL 2025 | 8 页（长文） | 无限制 | 无限制 |
+| AAAI 2026 | 7 页（最终版 +1） | 无限制 | 无限制 |
+| COLM 2025 | 9 页（最终版 +1） | 无限制 | 无限制 |
+
+---
+
+## 模板位置
+
+所有会议模板均位于 `templates/` 目录中：
+
+```
+templates/
+├── icml2026/       # ICML 2026 official
+├── iclr2026/       # ICLR 2026 official
+├── neurips2025/    # NeurIPS 2025
+├── acl/            # ACL style files
+├── aaai2026/       # AAAI 2026
+└── colm2025/       # COLM 2025
+```