DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

近日,来自中国人民大学与清华大学的研究团队联合发布了DeepAnalyze,这是全球首个面向自主数据科学的agentic LLM(大型语言模型)。该模型的发布在学术界和工业界引发了广泛关注,一周内即在GitHub上获得超过1000个星标,社交媒体浏览量突破20万次,标志着数据科学领域向智能化、自主化迈出了关键一步。

DeepAnalyze-8B的核心突破在于能够模拟专业数据科学家的完整工作流程,在真实计算环境中自主编排、优化各项操作,最终完成端到端的复杂数据科学任务。这一能力覆盖了数据科学的全生命周期:从数据任务层面看,它支持自动化数据准备、多维度数据分析、智能数据建模、动态数据可视化、深度数据洞察以及结构化报告生成;从数据研究层面看,它能够在任意数量的结构化数据(如数据库、CSV、Excel)、半结构化数据(如JSON、XML、YAML)和非结构化数据(如TXT、Markdown)中进行开放式深度研究,生成分析师级别的专业研究报告。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze的诞生并非偶然,而是对当前LLM在数据科学应用局限性的直接回应。现有方法主要分为两类:一是领域特定的LLM,如专注于数据科学代码生成或结构化数据理解的模型;二是基于workflow的智能体,通过人为设计的流程调用闭源LLM完成任务。这两种方法都存在明显缺陷:前者仅能处理单点任务,无法实现端到端的全流程覆盖;后者依赖的闭源模型未在真实数据科学任务环境中训练,难以有效编排和优化复杂操作。DeepAnalyze的提出,正是为了推动基于LLM的数据科学系统从workflow-based agent范式向可训练的agentic LLM范式转变。

然而,训练面向数据科学的agentic LLM面临两大核心挑战:首先是奖励稀疏问题。数据科学的复杂性使得LLM在训练早期几乎无法成功完成任务,导致正向奖励信号极度匮乏,传统的强化学习方法容易因此失效。其次是路径稀缺问题。数据科学的解决过程依赖长链推理,而高质量的求解轨迹十分稀缺,这使得LLM在庞大的搜索空间中只能进行低效的试错式探索,学习效率低下。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

针对这些挑战,DeepAnalyze团队创新性地提出了两项关键技术:一是Curriculum-based Agentic Training(课程式智能体训练)。该方法在真实环境中采用渐进式训练策略,从单一任务开始,逐步过渡到复合任务,让大模型能力稳步提升,有效避免了复杂任务上奖励信号为零导致的训练崩溃。二是Data-grounded Trajectory Synthesis(数据驱动的轨迹合成)。通过自动化合成50万条数据科学的推理和环境交互数据,为模型在庞大搜索空间中提供正确路径的指导,显著提升了学习效率。

通过在真实环境中的agentic训练,DeepAnalyze具备了自主编排和自适应优化的双重能力,能够端到端地完成从具体数据任务到开放式数据研究的全流程。在性能评估方面,DeepAnalyze表现卓越:DeepAnalyze-8B在DataSciBench(端到端数据科学基准测试)上优于所有开源模型,性能与GPT-4o相媲美;在DSBench的数据分析和数据建模任务上超越了基于workflow的智能体;在面向数据的深度研究中取得最佳表现,能够生成分析师级别的专业分析报告。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

例如,在处理复杂数据集时,DeepAnalyze能够自动识别数据特征、选择合适的数据预处理方法、构建优化模型并进行可视化呈现,整个过程无需人工干预。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

总结而言,DeepAnalyze作为首个面向自主数据科学的agentic LLM,其核心价值体现在两个方面:技术层面,它实现了自主编排和自适应优化的关键能力突破;方法论层面,它提出的Curriculum-based Agentic Training训练范式和data-grounded trajectory synthesis数据合成方法,有效解决了复杂场景下的奖励稀疏和轨迹稀缺问题,为高复杂度任务的学习提供了新思路。作为一个基础模型,DeepAnalyze既可直接应用,也可通过提示工程或监督微调进一步定制,以适应特定场景需求。

DeepAnalyze的开源生态已经初步建立,论文、代码、模型和数据均已公开,支持本地部署,可作为私有数据科学助手使用。这一开放策略不仅降低了技术门槛,也为社区协作和创新提供了坚实基础。从长远来看,DeepAnalyze的出现可能重塑数据科学的工作模式,将数据科学家从重复性劳动中解放出来,专注于更高层次的策略制定和创新探索。随着模型的持续迭代和生态的不断完善,自主数据科学有望成为AI赋能行业智能化转型的重要突破口。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

作者介绍:

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

张绍磊,中国人民大学信息学院助理教授,师从范举教授。博士毕业于中国科学院计算技术研究所,研究方向涵盖大语言模型、多模态大模型和AI for Data Science。在NeurIPS、ACL、ICLR等顶级会议发表论文30余篇,开源模型在GitHub累计获星5000+,长期担任ACL ARR领域主席和责任编辑。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

范举,中国人民大学教授、博士生导师,国家级青年人才,CCF数据库专委会、大数据专委会执行委员。研究方向包括数据治理技术与系统、智能数据库系统等,发表顶级论文60余篇,主持国家自然科学基金多项项目。

— 图片补充 —

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革


关注“鲸栖”小程序,掌握最新AI资讯

本文来自网络搜集,不代表鲸林向海立场,如有侵权,联系删除。转载请注明出处:https://www.itsolotime.com/archives/8784

(0)
上一篇 2025年10月30日 下午4:29
下一篇 2025年10月30日 下午6:04

相关推荐

  • 导演级AI重塑电影工业:Utopai East如何用叙事智能引擎撬动千亿韩流市场

    在传统好莱坞电影产业深陷高成本、低回报的结构性困境之际,一场由硅谷AI技术、韩国文化IP与中东资本共同驱动的产业革命正在悄然展开。AI原生影视工作室Utopai Studios与全球创新投资平台Stock Farm Road(SFR)近日宣布成立资本规模达数十亿美元的合资企业Utopai East,标志着AI影视生成技术正式从实验室走向产业化战场。这一战略合…

    2025年11月8日
    33100
  • AI操作系统时代降临!Managed Agents与Hermes Agent双星闪耀,小龙虾OpenClaw面临降维打击

    曾经风靡一时的OpenClaw(小龙虾)架构正面临前所未有的挑战。两大AI新物种的出现,标志着AI应用开发正从“工具嫁接”模式,迈向“AI原生操作系统”的新纪元。 其一,是Anthropic推出的Managed Agents。 它通过OAuth一键接入、云端托管、沙箱隔离与远程指挥通道,重新定义了AI与工具的交互方式。在这种范式下,AI本身就是操作系统,各类…

    2026年4月10日
    57100
  • Anthropic测试移除Claude Code权益,AI编程代理高消耗或推动订阅规则重构

    今日,Anthropic 一度在其 Claude Pro 套餐页面中移除了 Claude Code 权益,引发了开发者社区的广泛关注与不满。数小时后,官网页面恢复原状,相关负责人解释称这仅为一次小范围测试。然而,此次事件传递出一个明确信号:高消耗的 AI 编程代理应用,正促使平台重新审视并可能重构其订阅规则,Claude Code 未来转向更高阶的 Max …

    2026年4月23日
    26700
  • 突破GPU瓶颈:d-PLENA NPU架构实现扩散大模型采样2.53倍加速

    关键词:dLLMs、NPU、采样优化、d-PLENA、GEMM 扩散型大语言模型(dLLM)是一种融合了扩散模型迭代去噪特性的大语言模型,可实现并行 Token 生成。但其采样阶段展现出与以通用矩阵乘法(GEMM)为核心的 Transformer 层截然不同的计算特征。 Beyond GEMM-Centric NPUs: Enabling Efficient…

    2026年2月10日
    36600
  • Claude Opus 4.6实测:准确率跃升5.6%,成本骤降34%,自适应思考机制显威

    Anthropic发布了Claude Opus 4.6新版本,官方定位为“最智能的模型”,主打复杂智能体任务和长时程工作。相比此前的Claude Opus 4.5版本,新版本在架构上进行了多项升级,包括首次在Opus级别支持100万token上下文窗口、引入自适应思考(adaptive thinking)机制等。 我们对这两个版本进行了全面的对比评测,测试其…

    2026年2月10日
    1.2K00

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注