跳到正文

数据与训练

训练侧的门道:数据集构建、合成数据、预训练与后训练方法、算力与训练成本。

最新精选

第 21–40 条 · 共 41 条
8月6日周四
  1. Google DeepMind76

    Google DeepMind 的 WeatherNext 气旋预报模型实现突破并开源

    Google DeepMind 在 Nature 发表论文,其 WeatherNext AI 模型在气旋路径、强度和风场结构预报上达到 SOTA,平均多出一天以上的预警提前量,三天预报精度相当于此前模型的两天水平。

    推荐理由:原文给出气旋路径与强度预报的领先精度和开源入口,读者可了解单一模型如何替代全球与局地两套建模。

7月31日周五
  1. Microsoft Research62

    微软研究院发布 Echoverse:面向 computer-use 智能体的深度演化环境

    微软研究院提出 Echoverse,为 computer-use 智能体构建 12 个训练世界,包括 10 个完整领域世界和 2 个能力世界,每个世界由环境、任务和基于数据库的验证器三部分组成。

    推荐理由:微软研究院公开了 Echoverse 的构建流程与训练数据,读者可据此了解高保真合成环境如何影响 computer-use 智能体的训练效果。

7月9日周四
  1. Google Research62

    Google Research 发布 SensorFM:面向可穿戴健康数据的通用基础模型

    Google Research 发布 SensorFM,一个从无标注可穿戴数据中学习的大型传感器基础模型,预训练语料来自500万同意参与者、超过一万亿分钟的多模态传感器信号,覆盖100多个国家和20多种 Fitbit 与 Pixel Watch 设备。

    推荐理由:原文给出万亿分钟级可穿戴数据预训练与35项健康任务评测,读者可了解通用生理表征的规模化路径。

6月30日周二
  1. Google Research71

    Google 发布 TabFM:面向表格数据的零样本基础模型

    Google Research 发布 TabFM,一个面向表格数据分类与回归的零样本基础模型,将表格预测重构为上下文学习问题,无需手动训练、超参数调优和特征工程,单次前向传播即可对未见过的表格生成预测。

    推荐理由:原文给出零样本表格预测的架构设计与合成数据训练思路,读者可据此判断它能否替代传统树模型流程。

6月4日周四
  1. Google Research62

    Google 开源水文建模框架,支持机构自建 AI 洪水预报

    Google Research 在 GitHub 上以 Apache 2.0 许可开源其水文建模框架,让各国气象与水文机构能用与 Google Flood Hub 相同的架构和相近训练数据训练 AI 洪水预报模型。

    推荐理由:Google 把驱动 Flood Hub 的水文模型架构与训练流程开源,读者可了解其预测窗口提升与本地化接入方式。

5月27日周三
  1. Mistral AI60

    Mistral 推出物理 AI,将 Emmi AI 并入企业工程栈

    Mistral 宣布将 Emmi AI 并入公司,并在其企业解决方案中构建物理 AI 这一基础能力,用于 AI 原生的工业工程。该能力从几何与边界条件直接预测物理场,单次前向推理在单 GPU 上以秒级完成,定位为设计迭代的吞吐量提升,传统求解器仍用于验证和边缘场景。

    推荐理由:Mistral 把物理仿真模型纳入企业平台,读者可了解其与传统求解器的分工和适用场景。

5月20日周三
4月22日周三
3月18日周三
  1. Mistral AI62

    Mistral AI 推出 Forge,让企业用自有知识训练前沿模型

    Mistral AI 推出 Forge,一套让企业基于自有专有知识构建前沿级 AI 模型的系统,支持预训练、后训练和强化学习等阶段。Forge 支持 dense 与 MoE 两种架构,并可按需支持多模态输入,模型可在企业自有基础设施内训练与治理。

    推荐理由:Mistral 官方给出企业自建前沿模型的分阶段训练路径与已合作机构名单,可据此判断企业定制模型的落地方式。

3月17日周二
  1. Mistral AI60

    Mistral AI 与 NVIDIA 合作,成为 NVIDIA Nemotron Coalition 创始成员

    Mistral AI 宣布以创始成员身份加入 NVIDIA Nemotron Coalition,双方计划共同开发前沿开源 AI 模型,结合 Mistral AI 的模型架构与全栈平台和 NVIDIA 的算力、模型开发工具及合成数据生成管线。

    推荐理由:Mistral AI 以创始成员身份加入 NVIDIA Nemotron Coalition,读者可了解开放前沿模型的联合开发路径与分工。

3月12日周四
  1. Google Research71

    Google 在 Flood Hub 上线城市山洪预报,可提前 24 小时预警

    Google 宣布在 Flood Hub 上线城市山洪预报,利用新的 AI 方法可在城市区域提前最多 24 小时预测山洪风险。由于山洪缺乏河流水位站等地面真值数据,Google 用 Groundsource 方法借助 Gemini 分析公开新闻报道,提取出历史山洪事件数据集,用于训练和评估新模型。

    推荐理由:Google 把城市山洪预警接入 Flood Hub,读者可了解其用 Gemini 从新闻中提取历史灾情训练模型的做法。

  2. Google Research66

    Google 推出 Groundsource,用 Gemini 将新闻报道转为灾害数据

    Google 推出 Groundsource,一种用 Gemini 从非结构化新闻中提取灾害数据的方法,并发布首个开放数据集,包含 2000 年至今 150 多个国家的 260 万条城市山洪记录。人工复核显示 60% 的提取事件在地点和时间上准确,82% 足以用于实际分析。基于该数据,Google 已在 Flood Hub 推出提前 24 小时的近全球城市山洪预报。

    推荐理由:原文给出了用 Gemini 从新闻抽取灾害数据的方法与验证结果,读者可据此判断 LLM 构建历史基准的可行边界。

9月9日周二
  1. Mistral AI62

    Mistral AI 完成 1.7B€ C 轮融资,ASML 领投

    Mistral AI 宣布完成 1.7B€ 的 C 轮融资,投后估值 11.7B€,由半导体设备厂商 ASML 领投,DST Global、Andreessen Horowitz、Bpifrance、General Catalyst、Index Ventures、Lightspeed 和 NVIDIA 等现有投资方参投。

    推荐理由:Mistral AI 完成 1.7B€ C 轮融资,由 ASML 领投,读者可据此了解欧洲大模型公司的资本与产业合作走向。

7月27日周日
1月28日周二
9月19日周四
6月7日周五
4月25日周四