跳到正文
热点事件观察中

Marin发布Mochi 535B-A23B预训练检查点

4 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

Marin发布了Mochi 535B-A23B模型的57个预训练中间检查点,其中包括10个长上下文扩展阶段的检查点。 Sebastian Raschka对此进行了解读,指出该模型的技术报告详细说明了各组件的选择依据及原因,其设计出发点主要涵盖训练稳定性和GPU吞吐量。

AI 根据报道生成 · 22 小时前更新

事件进展

3 个进展

  1. 11月21日 05:52 · 1 篇报道
    基准测试对 Sebastian Raschka 表示喜爱
    Sebastian Raschka:基准测试对 Sebastian Raschka 表示喜爱
  2. 11月19日 23:10 · 1 篇报道
    Marin Mochi 535B-A23B 权重开放
    Sebastian Raschka:Sebastian Raschka 解读 Marin Mochi 535B-A23B 预训练检查点与技术报告
  3. 11月18日 22:44 · 2 篇报道
    基准测试难以反映实际需求
    Sebastian Raschka:基准测试难以反映实际需求

报道时间线

沿着报道,了解事件的不同侧面。

11月21日
  1. Sebastian Raschka
    基准测试对 Sebastian Raschka 表示喜爱

    基准测试很喜欢它。

11月19日
  1. Sebastian Raschka
    Sebastian Raschka 解读 Marin Mochi 535B-A23B 预训练检查点与技术报告

    Sebastian Raschka 点评了 Marin Mochi(535B-A23B)的检查点发布,称其技术报告说明了各组件为何这样选、如何选,出发点包括训练稳定性和 GPU 吞吐。

  2. Sebastian Raschka
    Sebastian Raschka 转发 LLM Wizard 推文

    Chris 在这里说得更透彻:https://x.com/llm_wizard/status/2123158042535411978?a=n12knyRsDNSD3ayy4gM&s=20

11月18日
  1. Sebastian Raschka
    基准测试难以反映实际需求

    通过基准测试来比较新的 LLM 发布,现在有点像用智商测试来做招聘决定。 当然,基准测试是有用的基线等等,但除此之外,我不知道它们在多大程度上能指示我们各自的任务和需求。(是的,也在看昨天的那个发布)

本事件热度走势

可比范围当前
5
可比范围峰值
1011月21日 06:00
近 24 小时变化
+20%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。