我要投稿

AI一周写出ICLR研讨会论文！成果简洁有效获审稿人大赞

发布日期：2025-03-21 05:43:24 浏览次数： 1568 来源：DataFunTalk

转自 | 量子位

AI写的论文已经在ICLR的研讨会上通过了同行评审，还是一口气中就中了两篇。

其中一篇获得了7/6/7的同行评审分数，另一篇的审稿人也给出了7/7的成绩。

而且从假设生成到同行评审出版整个流程都是AI自主完成，一篇用时仅需不到一周。

这个“AI科学家”名为Zochi，由名为的Intology初创企业打造，成立刚刚不到两个月。

两名联创分别是连续创业者Ron Arel和前Meta华人研究员Andy Zhou，两人均毕业于伊利诺伊大学厄巴纳-香槟分校。

Zochi入选的两篇论文，是以Andy Zhou名义进行投稿的，内容分别是：

子空间级别微调方法CS-ReFT，能够让7B的Llama-2在AlpacaEval中超过GPT-3.5，同行评审7/6/7；
大模型安全漏洞检测框架Siege，针对GPT-3.5-Turbo的检测准确率为100%，审稿人打分7/7。

并且在基于NeurIPS规则的自动打分程序的评审中，Zochi两篇论文均获得了8分的成绩。

两篇论文入选ICLR

Zochi被ICLR研讨会相中的两篇论文具体内容，接下来就一起来了解~

让7B Llama-2超越GPT-3.5

第一篇论文，提出了一种名为CS-ReFT的子空间级别微调方法。

Zochi发现了AI发展中的一个关键瓶颈——参数高效微调中的跨技能干扰。

也就是说，当同时将模型应用于多个任务时，一项技能的改进往往会降低其他技能的性能。

研究之后，Zochi提出了CS-ReFT方法，部分基于ReFT改造而来，但重点是表示编辑而不是权重修改。

具体来说，不同于LoRA等方法在权重级别实现正交性约束，CS-ReFT将这些约束直接应用于隐藏状态表示。

这种方法使得每个任务都有其专用的子空间变换，反之，每个变换都专注于一项独特的技能，从而消除了跨技能干扰。

当应用于Llama-2-7B时，CS-ReFT在AlpacaEval上取得了93.94%的胜率，用不到万分之一的参数超过了GPT-3.5-Turbo（86.30%）。

评审人员称赞，这是一个“聪明的想法”，并且“有效解决了ReFT 的一个关键限制”。

发现大模型安全漏洞

第二篇论文，关于大模型安全。

从现有的安全文献出发，Zochi提出了Siege框架，它使用树搜索算法增强了多轮越狱策略。

Zochi发现，模型在轻度违规在对话中累积的过程中会表现出“部分服从”行为，即在看似维护安全规则的同时附带产生一些违规的信息片段。

Siege就是利用这种现象，系统地识别和利用对话分支中的轻微违规，通过积累实现越狱攻击。

它将每个对话状态视为搜索树中的一个节点，采用定向搜索来并行探索多种攻击策略。

该框架其核心创新是一种复杂的部分合规性跟踪机制，可以识别和利用增量政策泄漏。

与以前的方法相比，Siege使用更少的查询，在GPT-3.5-Turbo上实现了100%的成功率，在GPT-4上实现了 97% 的成功率。

审稿人评价称，Siege是一种“有效、直观的方法” ，并且告知了人们需要重新评估现有的人工智能防御策略。

预测蛋白质-核酸结合位点

除了这两篇之外，还有一篇论文和计算生物学相关，由于完成时已经错过了ICLR会期，转而投稿期刊，目前正在接受审查。

这项研究提出了一种名为EGNN-Fusion的架构，能够预测蛋白质-核酸结合位点。

它的性能可与最先进的方法相媲美，同时将参数数量减少了95%，体现了Zochi跨领域迁移知识和解决AI之外的复杂科学挑战的能力。

和前面两篇一样，这篇论文也进行了程序自动化评分，得分为7分，所以Zochi三篇论文的平均成绩为7.67。

多智能体协作完成科研流程

除了能在不到一周的时间内自主写出一篇高质量论文之外，Zochi还挑战了MLE-Bench的Kaggle子集。

结果在没有任何特定任务优化的情况下，Zochi直接取得了SOTA水准，并且在80%的任务上超越了人类的平均表现、在一半的任务当中获得金牌。

那么，Zochi是怎么做到的呢？其中的关键，就在于当下流行的多智能体协作框架。

Zochi将科学方法分解为专门的组件,每个组件处理研究过程中不同的过程，具体包括四个阶段：

文献分析和知识综合；
假设生成和细化，确定研究方向；
实验设计和实施、评估；
数据分析和解释以及科学交流。

给Zochi设定的研究目标，既可以是一般的研究领域（如“AI安全”），也可以是一个细粒度问题或思路（如“多模态表征对齐方法”）。

系统进行广泛的探索和迭代过程，Zochi生成多个候选假设，设计并执行实验来测试这些假设，分析结果，并根据发现迭代优化其方法。

最后，Zochi以研究论文的格式起草一份报告，不断完善直到质量足以提交同行评议。

此外Zochi的另一个关键，是其结构化验证过程，类似于学术研究中的导师-学生关系。

在研究过程的关键节点，人类专家需要在下一步骤进行之前验证Zochi的工作，具体包括三个关键阶段——大规模实验开始之前、准备文稿之前，以及文稿完成之后。

反馈侧重于验证方法的合理性，并验证报告的结果是否准确反映实验结果，以确保完整性。

除了强制性验证外，人类专家还可以选择随时提供高层次的反馈，这一过程主要用于论文写作，因为Zochi经常难以遵循预期的提交格式（如页面限制）。

不过人类输入通常包括几句简短的评论，用于指出潜在问题或建议替代方向，而不是给予详细指示。

“AI科研”仍然争议不断

Zochi这次取得的成绩，在AI当中确实是一个不错的水平，但并不是最早的AI科研系统。

去年，“Transformer八子”之一的Llion Jones创立的Sakana AI，推出了一个基于AI的自动化科研系统。

而且这个系统名字简单粗暴，就叫AI Scientist，并且已经有了第二代。

也是在这届ICLR上，第二代AI Scientist的论文在其中的一个研讨会上通过了同行评审，分数为6/7/6。

不过，研讨会和ICLR主会议的录用标准也存在不同，前者的录用率大约是后者的两到三倍。

在Sakana内部基于ICLR主会议规则进行的评审中，AI Scientist-v2的论文并未通过。

这似乎也和Intology基于NeurIPS规则进行的机器评测结果形成了对应，AI Science v2的平均成绩不到四分，甚至还不如前一代。

当然，Zochi的成绩相对高出不少，但最终能不能入选主会议也要等待最终结果。

但是，由于学术界针对AI科研还存在很大争议，即使成功入围，研究团队可能也会在正式发稿之前撤回。

Intology就表示，出于维护学术诚信的考虑，认同AI不应当被列为学术作品的作者，但正在和研讨会组织者进行讨论，决定是否向研究界展示。

而在前段时间，另一家顶会CVPR就拒绝了19篇论文，其原因正是和滥用AI有关。

甚至CVPR还明确要求，审稿人撰写评审意见同样不能使用AI，也不能把任何实质性内容交给AI（哪怕是用于翻译也不可以）。

学术会议之外，国内外诸多高校也开始针对学生论文使用AI的情况加强审查，并出台限制措施。

的确在现实情况当中，确有滥用AI的行为存在，颁布这类规定的目的也是基于学术诚信的考量。

但一禁了之不应是长久之策，还应该对学术研究从事者，特别是学生群体给予正确引导，并积极探索AI提效与学术不端之间的合理边界。

那么，你认为AI在学术活动当中，怎样被利用才是合理的呢？

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-03-28

他因选DeepSeek 70B 体验差，被开除

2025-03-28

AI训练平台终极构建指南：结合RoCE/IB网络、3FS存储与HAI平台

2025-03-28

微调篇「数据集构建」保姆级教程来了！

2025-03-27

olmOCR-7B：文档提取专用模型

2025-03-27

如何用 deepseek v3-0324 最新版，附常见问题和解决方案

2025-03-27

大模型微调数据生成工具Easy Dataset及KBLaM知识注入框架评析

2025-03-26

从SFT到RFT：AI模型训练的进化之路

2025-03-26

使用MCP Inspector调试MCP服务端

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

一文读懂DeepSeek-R1本地部署配置要求（建议收藏）

2025-02-04

DeepSeek R1 671B 完整版本地部署教程来了！！！

2025-02-04

太爽了！o1 现在可以天天享用了

2024-09-18

万字综述 10+ 种 LLM 投机采样推理加速方案

2024-07-11

微调神器LLaMA-Factory官方保姆级教程来了，从环境搭建到模型训练评估全覆盖

2024-07-09

FP8 低精度训练：Transformer Engine 简析

2024-07-11

彻底理解系列之：FP32、FP16、TF32、BF16、混合精度

2024-07-26

别被Deepseek低成本冲昏头！本地化部署后续的“甜蜜陷阱”，你真能扛住吗？

2025-02-05

ollama 部署 deepseek-r1 70B 模型完整指南

2025-01-27

o3-mini 完全指南：一个被 DeepSeek 破大防的模型

2025-02-01

大家都在问

从 0 到 1，Agentic Ops 如何打造企业级 AI 生产力？

2025-03-20

DeepSeek-R1的Qwen-32B蒸馏模型与QwQ-32B模型，谁更强？

2025-03-16

部署DeepSeek的4条路，企业级客户到底该咋走？

2025-03-16

谷歌Gemma 3 27b 到底能不能打，写个游戏测试下？

2025-03-13

强化学习(RL)是什么? 它和微调有什么区别?

2025-03-13

从DeepSeek到Manus：如何实现本地LLM微调+联网开发？

2025-03-11

Manus，为何是他们做出来了？

2025-03-07

在树莓派5上运行9款流行的AI模型：哪些能用？哪些不行？

2025-03-05

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB