语言与智能体 — 论文笔记
大语言模型、科学智能体与语言工具
2018
2019
ACL
ACL-2019 多任务学习提升神经机器翻译鲁棒性
2019-08-01 · LLM, NLP
arXiv
arXiv-2019 RoBERTa：稳健优化的 BERT 预训练方法
2019-07-26 · LLM, NLP
OpenAI
OpenAI-2019 语言模型是无监督多任务学习者（GPT-2）
2019-07-06 · LLM, NLP
arXiv
arXiv-2019 面向自然语言理解与生成的统一语言模型预训练
2019-05-08 · LLM, NLP, transformer
ICML
ICML-2019 NLP 的参数高效迁移学习
2019-02-02 · LLM, NLP
2021
2022
arXiv
arXiv-2022 语言模型的整体评估（HELM）
2022-11-09 · LLM, NLP
NAACL
NAACL-2022 MoEBERT：基于重要性引导适配从 BERT 到混合专家模型
2022-07-29 · LLM, NLP
arXiv
arXiv-2022 基于人类反馈强化学习训练有益且无害的助手
2022-04-16 · LLM, NLP, transformer
OpenAI
OpenAI-2022 基于人类反馈训练遵循指令的语言模型（InstructGPT）
2022-03-16 · LLM, NLP, transformer
ICLR
ICLR-2022 LoRA：大语言模型的低秩适配
2022-01-29 · LLM, NLP
NeurIPS
NeurIPS-2022 思维链提示激发大语言模型推理能力
2022-01-28 · LLM, NLP
Journal of Machine Learning Research
Journal of Machine Learning Research-2022 Switch Transformer：以简单高效稀疏性扩展至万亿参数模型
2022-01-16 · LLM, NLP, transformer
2025
arXiv
arXiv-2025 评估大语言模型在科学发现中的能力
2025-12-17 · Agent, LLM, NLP
NeurIPS
NeurIPS-2025 AI-Researcher：自主科学创新
2025-12-08 · Agent, NLP, LLM
EMNLP
EMNLP-2025 从自动化到自主：大语言模型在科学发现中的综述
2025-11-04 · Agent, NLP, LLM
arXiv
ACEBench：谁赢得工具使用的赛点
2025-09-08 · Agent, LLM, NLP
arXiv
arXiv-2025 AI Scientist-v2：基于智能体树搜索的研讨会级自动科学发现
2025-04-10 · Agent, LLM, NLP
Nature Computational Science
Nature Computational Science-2025 SciToolAgent：知识图谱驱动的多工具集成科学智能体
2025-01-24 · Agent, LLM
ICLR
ICLR-2025 ToolACE：赢得 LLM 函数调用的关键分
2025-01-23 · LLM, NLP, Agent