跳到正文

数据与训练

训练侧的门道:数据集构建、合成数据、预训练与后训练方法、算力与训练成本。

最新精选

第 41–51 条 · 共 51 条
10月30日周四
10月29日周三
10月16日周四
9月17日周三
9月16日周二
  1. baidu · Hugging Face 新模型65

    百度发布 Qianfan-VL-70B 视觉语言模型

    百度在 Hugging Face 上发布 Qianfan-VL-70B,属于 Qianfan-VL 通用多模态大语言模型系列,面向企业级多模态应用。该系列包含 Qianfan-VL-3B、Qianfan-VL-8B 和 Qianfan-VL-70B,均为 32k 上下文,其中 8B 和 70B 支持 CoT,70B 面向复杂推理和数据合成。

    推荐理由:材料同时列出3B、8B、70B差异与训练流程,便于比较文档理解场景的部署取舍。

9月4日周四
  1. SemiAnalysis76

    SemiAnalysis:AWS 与 Anthropic 的多 GW Trainium 扩张推动 Amazon AI 复苏

    SemiAnalysis 认为,AWS 可能通过 Anthropic 合作和多 GW Trainium 数据中心扩张迎来 AI 复苏。文章称 Anthropic 年化收入在 2025 年内增长 5 倍至 $5B,AWS 有 3 个园区处于建设最后阶段,合计超过 1.3GW IT capacity,专门服务 Anthropic 训练需求。

    推荐理由:文章把云收入、数据中心建设和芯片 TCO 放在一起,提供了理解 AWS 押注 Anthropic 的背景。

7月23日周三
  1. Mistral AI65

    Mistral AI发布AI环境标准报告,披露Mistral Large 2训练与Le Chat推理足迹

    Mistral AI发布其LLM环境足迹研究,提出用生命周期分析支持AI行业的全球环境标准。该研究与Carbone 4和法国生态转型机构ADEME合作,并经Resilio和Hubblo同行评审,披露Mistral Large 2截至January 2025且经过18个月使用后的影响为20,4 ktCO₂e、281 000 m3用水和660 kg Sb eq。

    推荐理由:报告给出训练与推理的环境核算口径,可作为比较模型足迹的参考样本。

7月12日周六
8月1日周四
  1. Suno Blog68

    Suno 回应 RIAA 成员唱片公司的版权诉讼并阐述音乐生成愿景

    Suno 回应 RIAA 成员唱片公司在 June 24th 提起的版权诉讼,称对方关于训练数据侵权的指控在事实和法律上都有缺陷。Suno 表示其音乐生成技术学习的是风格、模式和形式,并称已有超过 12 million 人用 Suno 以新方式参与音乐创作。公司还称产品面向原创音乐,已设置检查并阻止音频上传中的版权内容、禁止基于艺术家描述生成音乐等原创性保护功能。

    推荐理由:Suno 从训练数据、原创性控制和唱片公司谈判角度,展示音乐生成版权诉讼中平台方的核心论证。