arXiv于2026年11月6日同日发布两项关于大模型压缩的研究，分别从量化精度分配和参数表示自由度两个角度降低模型部署成本。TileQuant提出以硬件对齐的二维权重瓦片作为混合精度分配单元，实验显示其生成吞吐达到原模型的2.66倍；另一项名为“Neural Compression over Equivalence Classes: Exact Gauges and Functional Rate-Distortion”的工作则利用网络参数化的等价类自由度，在SmolLM2与Qwen3上将Zstandard压缩后的检查点体积最多减少23.4%。

TileQuant：以瓦片为精度分配单元

论文指出，训练后量化（PTQ，Post-Training Quantization）虽能降低大语言模型部署成本，但保持质量需考虑权重敏感度的不均匀性。统一PTQ使用单一权重位宽，重要性感知PTQ在该位宽内调整缩放或重建权重，按列混合精度则保留部分列于更高精度。然而敏感度在列内亦有变化，整列保留会同时保护较不敏感的权重，而运行时异常值检测又会增加解码开销。

为此，TileQuant提出一种免训练框架，将精度分配给硬件对齐的二维权重瓦片。离线校准提供两种评分：基于前向统计的输入激活感知评分，校准成本更低；基于损失敏感度的梯度信息评分，质量保持更强。在每个投影的保留预算内，得分最高的瓦片保持16位，其余使用8位。

实验显示，TileQuant达到原模型2.66倍的生成吞吐。在语言建模、推理、长上下文检索和问答任务中，它保持质量，并在多个任务上超过量化模型和原模型。

等价类压缩：利用表示自由度

另一篇论文指出，神经网络对同一或近似同一函数存在多种参数化方式，但部署时通常只存储训练恰好产生的参数向量。研究显示，这种表示自由本身可用于压缩。方法不重新设计编解码器，而是搜索精确保持函数的变换和受控的函数扰动，用未改动的物理压缩器本身选择更廉价的表示。

论文称，精确规范族在严格审计下提供零失真参考；允许微小函数变化则带来更大的率失真增益。在SmolLM2和Qwen3上，该方法将Zstandard压缩后的检查点体积最多减少23.4%，在gzip、Brotli和ZipNN下也有相近的相对缩减，从而将训练网络的表示自由确立为一种实用的存储资源。

共同指向推理成本痛点

两项研究均针对大模型部署中的成本问题：TileQuant侧重通过混合精度量化提升推理吞吐并保持质量，等价类压缩则侧重减小存储检查点体积。前者为免训练框架，后者利用表示自由度而不改动压缩器，二者从不同环节降低部署开销。

后续关注点包括：TileQuant在不同模型架构和硬件上的通用性，以及等价类方法在更多模型系列和压缩器下的表现。两项工作均以arXiv预印本形式发布，尚未经过同行评审。