跳到正文
Lisan al Gaib· @scaling01 · X·· 3 小时前AI 评分42
AI 导读

脏循环派已经来了 Nvidia 几天前发布了 Dory1-4B,一个 36 层的循环 LLM。8 个输入层、一个 20 层的循环块(循环 1、2 或 4 次),以及 8 个输出层。

正文 · 原文

DIRTY LOOPERS ARE ALREADY HERE

Nvidia released Dory1-4B a few days ago a looped LLM with 36 layers. 8 input layers, a recurrent block of 20 layers (looped 1, 2 or 4 times), and 8 output layers.

来源:Lisan al Gaib · x.com