向量量化通过码本和索引压缩高维数据，码本由K-Means训练，索引用k位表示，压缩比高但精度受码本大小限制。乘积量化将向量分割为子向量，分别量化，牺牲压缩比换取精度控制，码本存储不变，索引存储增加N倍。两者适用于数据转移瓶颈场景。

本文介绍了一种新的向量量化训练方案DiVeQ，采用STE技巧，无需额外的Aux Loss，使训练过程更加简洁。DiVeQ在视觉理解和生成中表现出色，解决了传统方法的超参数调节问题。

本研究提出了一种去噪扩散概率模型（DDPM-PCC），用于低比特率点云压缩。该模型通过PointNet编码器生成条件向量，并利用可学习向量量化器进行量化，显著提高了比特率-失真性能，优于现有技术。

本研究提出了一种新在线算法TurboQuant，旨在解决向量量化中的均方误差和内积失真问题。该算法通过随机旋转输入向量和优化标量量化器，有效保持几何结构。实验结果表明，其在关键值缓存量化和最近邻搜索中优于现有技术。

本研究提出了NoWag框架，旨在解决大型语言模型在资源受限环境中的应用问题。NoWag实现了无损形状保留压缩，显著优于现有的向量量化和修剪方法，为未来研究提供了新思路。

本文针对传统人工智能代理在突现语言游戏中缺乏内部语言学习能力的问题，提出了一种新方法VQEL，结合向量量化，使代理能够在自我博弈中自主创造和发展离散的符号表示。实验结果表明，VQEL在性能上超越了传统的REINFORCE方法，且通过向量量化提高了控制能力，减少了系统崩溃的可能性。

该研究提出了多种创新的金融市场分析方法，包括RVRAE动态因子模型、LLMFactor框架和AlphaForge因子生成框架，旨在提高股票收益预测的准确性和有效性。通过深度学习和自编码器技术，克服了传统模型在处理非线性和高噪声数据时的不足，实证测试表明这些新方法在金融时间序列预测中表现优越。

该研究提出了一种索引反向传播量化（IBQ）方法，解决了现有向量量化在可扩展性方面的不足，并优化了代码本与视觉编码器的联合训练。实验结果表明，IBQ在视觉生成任务中表现优异。

VQVAE是一种无监督学习的离散表征方法，结合了自回归模型和生成模型的优点。通过设计离散字典和直通估计器，VQVAE有效建模离散数据，核心在于向量量化和EMA更新字典，支持多尺度特征提取，提升生成效果。

本研究提出了一种新方法SimVQ，旨在解决向量量化模型中潜在空间表示崩溃的问题，并优化线性空间。实验结果表明，该方法在多种模态下表现优异。

本研究提出了一种向量量化元学习方法（MetaRec），旨在提升可转移序列推荐系统的性能。该方法整合多个源领域的用户-物品互动数据，有效解决输入异质性问题，从而显著改善推荐效果。

本文介绍了一种新的离散扩散概率模型，利用无约束的Transformer架构实现向量量化标记的并行预测，从而提升图像生成的质量和多样性。研究中提出了Token-Critic辅助模型和正则化的向量量化框架，显著改善了生成效果。此外，SEED和MAGVIT-v2等新技术展示了大型语言模型在图像和视频生成中的优势，并提出了TiTok和Open-MAGVIT2等新方法，优化了图像生成过程，推动了该领域的创新。