T
traeai
登录

概念

FP8

别名:Floating Point 8

低精度计算格式

已跟踪 5 条高相关材料

TraeAI 观察

相关材料

已收录 5 条与 FP8 相关的内容,按评分排序。

#549. AI 芯片究竟如何工作?GPU/TPU 的底层设计

#549. AI 芯片究竟如何工作?GPU/TPU 的底层设计

跨国串门儿计划2228 字 (约 9 分钟)
92

AI芯片通过底层电路设计实现高效矩阵运算,核心在于multiply-accumulate操作与systolic array架构,数据移动成本远高于计算本身。

入选理由:低精度计算(如FP4/FP8)带来平方级性能提升

精选播客#AI芯片#硬件架构#矩阵运算#TPU#GPU中文
AI HOT 精选 图标

蚂蚁百灵发布Ling-3.0-flash开源权重

AI HOT 精选239 字 (约 1 分钟)
85

蚂蚁百灵发布Ling-3.0-flash开源权重,提供BF16和FP8量化版本以适应不同硬件需求。

入选理由:Ling-3.0-flash开源权重支持BF16和FP8两种量化格式

精选文章#蚂蚁百灵#Ling-3.0-flash#开源#量化中文
The Secret to Cheaper LLM Inference: NVFP4

The Secret to Cheaper LLM Inference: NVFP4

NVIDIA Developer186 字 (约 1 分钟)
85

NVFP4通过4位量化技术降低大模型内存占用,在保持质量前提下提升推理效率,使更大模型或更高并发成为可能。

入选理由:NVFP4量化格式可减少模型内存占用达50%以上

精选视频#LLM#推理优化#量化技术#NVIDIA英文
GLM 5.2 - The Top NEW Open Weights Model

GLM 5.2 - The Top NEW Open Weights Model

Sam Witteveen3137 字 (约 13 分钟)
70

GLM 5.2 是一个新发布的开源模型,性能接近 Anthropic 和 OpenAI 的模型,且已开放权重。

入选理由:GLM 5.2 已发布完整版和 FP8 版本的权重。

精选视频#GLM#模型#开源#AI英文

跨材料问答 · FP8

回答基于:FP8 相关 5 条材料
    0 / 500

    AI 可能会生成不准确的信息,请核实重要内容