DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

近日,来自中国人民大学与清华大学的研究团队联合发布了DeepAnalyze,这是全球首个面向自主数据科学的agentic LLM(大型语言模型)。该模型的发布在学术界和工业界引发了广泛关注,一周内即在GitHub上获得超过1000个星标,社交媒体浏览量突破20万次,标志着数据科学领域向智能化、自主化迈出了关键一步。

DeepAnalyze-8B的核心突破在于能够模拟专业数据科学家的完整工作流程,在真实计算环境中自主编排、优化各项操作,最终完成端到端的复杂数据科学任务。这一能力覆盖了数据科学的全生命周期:从数据任务层面看,它支持自动化数据准备、多维度数据分析、智能数据建模、动态数据可视化、深度数据洞察以及结构化报告生成;从数据研究层面看,它能够在任意数量的结构化数据(如数据库、CSV、Excel)、半结构化数据(如JSON、XML、YAML)和非结构化数据(如TXT、Markdown)中进行开放式深度研究,生成分析师级别的专业研究报告。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze的诞生并非偶然,而是对当前LLM在数据科学应用局限性的直接回应。现有方法主要分为两类:一是领域特定的LLM,如专注于数据科学代码生成或结构化数据理解的模型;二是基于workflow的智能体,通过人为设计的流程调用闭源LLM完成任务。这两种方法都存在明显缺陷:前者仅能处理单点任务,无法实现端到端的全流程覆盖;后者依赖的闭源模型未在真实数据科学任务环境中训练,难以有效编排和优化复杂操作。DeepAnalyze的提出,正是为了推动基于LLM的数据科学系统从workflow-based agent范式向可训练的agentic LLM范式转变。

然而,训练面向数据科学的agentic LLM面临两大核心挑战:首先是奖励稀疏问题。数据科学的复杂性使得LLM在训练早期几乎无法成功完成任务,导致正向奖励信号极度匮乏,传统的强化学习方法容易因此失效。其次是路径稀缺问题。数据科学的解决过程依赖长链推理,而高质量的求解轨迹十分稀缺,这使得LLM在庞大的搜索空间中只能进行低效的试错式探索,学习效率低下。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

针对这些挑战,DeepAnalyze团队创新性地提出了两项关键技术:一是Curriculum-based Agentic Training(课程式智能体训练)。该方法在真实环境中采用渐进式训练策略,从单一任务开始,逐步过渡到复合任务,让大模型能力稳步提升,有效避免了复杂任务上奖励信号为零导致的训练崩溃。二是Data-grounded Trajectory Synthesis(数据驱动的轨迹合成)。通过自动化合成50万条数据科学的推理和环境交互数据,为模型在庞大搜索空间中提供正确路径的指导,显著提升了学习效率。

通过在真实环境中的agentic训练,DeepAnalyze具备了自主编排和自适应优化的双重能力,能够端到端地完成从具体数据任务到开放式数据研究的全流程。在性能评估方面,DeepAnalyze表现卓越:DeepAnalyze-8B在DataSciBench(端到端数据科学基准测试)上优于所有开源模型,性能与GPT-4o相媲美;在DSBench的数据分析和数据建模任务上超越了基于workflow的智能体;在面向数据的深度研究中取得最佳表现,能够生成分析师级别的专业分析报告。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

例如,在处理复杂数据集时,DeepAnalyze能够自动识别数据特征、选择合适的数据预处理方法、构建优化模型并进行可视化呈现,整个过程无需人工干预。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

总结而言,DeepAnalyze作为首个面向自主数据科学的agentic LLM,其核心价值体现在两个方面:技术层面,它实现了自主编排和自适应优化的关键能力突破;方法论层面,它提出的Curriculum-based Agentic Training训练范式和data-grounded trajectory synthesis数据合成方法,有效解决了复杂场景下的奖励稀疏和轨迹稀缺问题,为高复杂度任务的学习提供了新思路。作为一个基础模型,DeepAnalyze既可直接应用,也可通过提示工程或监督微调进一步定制,以适应特定场景需求。

DeepAnalyze的开源生态已经初步建立,论文、代码、模型和数据均已公开,支持本地部署,可作为私有数据科学助手使用。这一开放策略不仅降低了技术门槛,也为社区协作和创新提供了坚实基础。从长远来看,DeepAnalyze的出现可能重塑数据科学的工作模式,将数据科学家从重复性劳动中解放出来,专注于更高层次的策略制定和创新探索。随着模型的持续迭代和生态的不断完善,自主数据科学有望成为AI赋能行业智能化转型的重要突破口。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

作者介绍:

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

张绍磊,中国人民大学信息学院助理教授,师从范举教授。博士毕业于中国科学院计算技术研究所,研究方向涵盖大语言模型、多模态大模型和AI for Data Science。在NeurIPS、ACL、ICLR等顶级会议发表论文30余篇,开源模型在GitHub累计获星5000+,长期担任ACL ARR领域主席和责任编辑。

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革

范举,中国人民大学教授、博士生导师,国家级青年人才,CCF数据库专委会、大数据专委会执行委员。研究方向包括数据治理技术与系统、智能数据库系统等,发表顶级论文60余篇,主持国家自然科学基金多项项目。

— 图片补充 —

DeepAnalyze:首个面向自主数据科学的Agentic LLM,开启数据科学范式变革


关注“鲸栖”小程序,掌握最新AI资讯

本文来自网络搜集,不代表鲸林向海立场,如有侵权,联系删除。转载请注明出处:http://www.itsolotime.com/archives/8784

(0)
上一篇 2025年10月30日 下午4:29
下一篇 2025年10月30日 下午6:04

相关推荐

  • 摩尔线程LiteGS技术斩获SIGGRAPH Asia银奖:3D高斯溅射重建效率突破性提升

    在近期于香港举办的SIGGRAPH Asia 2025国际图形学顶级会议上,摩尔线程凭借其自主研发的3D高斯溅射(3DGS)基础库LiteGS,在3DGS重建挑战赛中荣获银奖。这一成果标志着该公司在下一代图形渲染技术领域取得了重要进展。 3D高斯溅射:图形渲染技术的范式变革3D高斯溅射(3D Gaussian Splatting)是2023年提出的一种革命性…

    2025年12月19日
    24000
  • 从‘Slop’当选年度词汇看AI内容生态的挑战与演进

    近日,韦氏词典宣布将‘slop’评选为2025年度词汇,并将其新定义为‘通常由人工智能大批量生成的低质量数字内容’。这一词汇的流行,不仅反映了公众对AI生成内容泛滥的直观感受,更揭示了当前数字内容生态面临的深刻变革。 从词源学角度看,‘slop’一词的演变颇具象征意义。18世纪时它指‘软泥’,19世纪转为‘食物残渣’(如猪食),后泛指‘垃圾’或‘无价值之物’…

    2025年12月16日
    8300
  • 从技术突破到生态重塑:快手AI战略的产业级价值兑现路径分析

    2025年被广泛视为AI技术从实验室走向产业应用的关键转折点。在这一历史性节点上,以多模态生成、智能体(Agent)为代表的AI技术正加速探索更高效、更贴合实际需求的应用形态。其中最具战略意义的趋势在于:AI技术正在从单点创新迈向系统性、产业级价值的全面兑现。对于所有致力于数字化转型的企业而言,这不仅是一个技术命题,更是一个关乎未来竞争力的核心战略课题。 在…

    2025年11月3日
    7800
  • 从《杰森一家》到现实:个人飞行器技术演进与商业化挑战深度解析

    几十年来,人类对个人飞行器的幻想从未停止。从20世纪60年代动画片《杰森一家》中描绘的垂直起降飞行器,到如今Jetson ONE等产品的问世,这一领域正经历从科幻到现实的艰难跨越。本文将从技术原理、市场现状、法规挑战及未来展望四个维度,深入剖析个人飞行器的发展现状与瓶颈。 **技术架构:电动垂直起降(eVTOL)的突破与局限** Jetson ONE作为当前…

    2025年11月1日
    9700
  • GPT-5.2 vs Gemini 3 Pro:年度AI对决的深度技术剖析与产业格局演变

    在人工智能领域竞争白热化的2025年,OpenAI与谷歌之间的技术对决达到了前所未有的激烈程度。GPT-5.2作为OpenAI年度重磅产品,在发布48小时内即面临来自各方的严格审视,而谷歌Gemini 3 Pro则凭借卓越表现重新定义了行业标杆。这场对决不仅关乎单一产品的成败,更折射出两大科技巨头在技术路线、研发策略和市场布局上的根本差异。 Epoch AI…

    2025年12月14日
    7900

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注