分析：TileKernels开源内容与Yifan Zhang披露的V4架构规格对应

时间：2026-04-24 11:59:03

　　消息，分析师Yifan Zhang披露的V4架构规格与DeepSeek开源的TileKernels内核库存在多处对应。Zhang称V4残差连接使用了流形约束超连接，这是对字节Seed团队2024年提出的HC加双随机矩阵约束的改进版。通过TileKernels内核代码推测V4架构，三项核心命中、一项落空。模型卡确认V4使用MHC，命中。模型卡还确认V4是MOE模型，命中。权重使用FP4+FP8混合存储，命中。唯一未中的是条件记忆模块，模型卡同样未提及。模型卡揭示了TileKernels未涉及的新组件：混合注意力机制是V4长上下文效率飞跃的核心，1M上下文下推理FLOPS仅为V3.2的27%，KV缓存仅10%训练改用Muon优化器。

上一篇：特朗普威胁对英国加征关税，施压取消数字税返回首页

下一篇：某巨鲸保本平仓BTC及ETH多单，总规模达3600万美元

热点推荐

1 美众议院再度否决限制特朗普战争权力的

消息，美国众议院以极其微弱差距否决了一项由民主党主导、旨在阻止对伊朗战争的决议。此...

2 以色列军方：北部地区响起防空警报

消息，周四，在有炮弹从黎巴嫩射向以色列后，以色列北部多个地区响起防空警报。部分来袭...

3 Grove推出10亿美元流动性网络支持代币化国

消息，Grove公司推出了名为Basin的流动性网络，旨在支持代币化美国国债的即时赎回，日均可提...

4 特朗普政府寻求黎以和平协议面临漫长道

消息，消息人士表示，特朗普政府在寻求实现黎巴嫩与以色列之间全面且长期和平协议的最终...

5 未知钱包转入270,317,105枚USDC