跳到正文
热点事件持续更新

Quadric Chimera GPNPU 支持任意长度提示推理

1 篇报道1 个报道来源14 小时前更新

先了解这件事

AI 综述

Quadric 介绍其 Chimera GPNPU 用单个二进制支持配置容量内任意长度的提示推理,无需按长度区间分别编译和验证。Quadric 称,这能避免固定长度计算中的无效算力开销。 其背景是,多数编译式推理栈对 1024 token 图每次固定计算 1024 个位置,输入 50 token 时其余 974 个位置按 padding 计算。该无效开销的对比和节省效果均出自 Quadric 的说法。

AI 根据报道生成 · 13 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. Semiconductor Engineering
    Quadric Chimera GPNPU 支持变长 Prompt 推理

    Quadric Chimera GPNPU 用单个二进制支持配置容量内的任意长度 prompt,无需按长度区间分别编译和验证。多数编译式推理栈对 1024 token 图每次固定计算 1024 个位置,输入 50 token 时其余 974 个位置按 padding 计算。Chimera 称由此避免这部分无效算力开销。

本事件热度走势

可比范围当前
7
可比范围峰值
1011月11日 17:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。