T
traeai
登录

模型

GPT-OSS

采用Hard Clip操作的开源模型

已跟踪 2 条高相关材料

TraeAI 观察

最近变化

2026-11-16 · 本地小型LLM在处理教科书内容时得分12到20分(满分20),但在处理最新研究论文时得分降至0到9分(满分15)。

为什么值得关注

GPT-OSS 被反复提及时,通常意味着它正在影响产品路线、开发者工作流或 AI 产业判断。这个页面把分散材料合并成一个可持续更新的观察入口。

AIAttentionK3模型LLMMoE

相关材料

已收录 2 条与 GPT-OSS 相关的内容,按评分排序。

Towards Data Science 图标

Local LLMs Handle Textbook RAG but Fail on New Research Papers

Towards Data Science2453 字 (约 10 分钟)
85

本地小型LLM在处理教科书内容时表现良好,但在处理最新研究论文时几乎失效,表明模型对新内容的适应能力不足。

入选理由:本地小型LLM在处理教科书内容时得分12到20分(满分20),但在处理最新研究论文时得分降至0到9分(满分15)。

精选文章#RAG#LLM#本地模型#研究论文#AI英文
简单谈谈K3的MoE和Attention

简单谈谈K3的MoE和Attention

科学空间3451 字 (约 14 分钟)
85

K3模型通过Stable LatentMoE和SiTU-GLU改进MoE稳定性,结合Per-Head Muon优化Attention机制,实现效果与效率的平衡。

入选理由:K3采用SiTU-GLU替代SwiGLU,通过softcap操作减少梯度爆炸风险

精选文章#MoE#Attention#K3模型#深度学习#模型优化中文

跨材料问答 · GPT-OSS

回答基于:GPT-OSS 相关 2 条材料
    0 / 500

    AI 可能会生成不准确的信息,请核实重要内容