Jaeger v2.18.0 版本新增对 ClickHouse 的支持,优化分布式追踪数据的存储和查询。ClickHouse 的列式存储架构高效处理大量半结构化事件数据,提供快速查询性能和高压缩比。集成 ClickHouse 后,Jaeger 能更好地监控微服务性能,减少故障恢复时间,并支持复杂的分析查询,提升数据处理效率。
Qdrant 1.18引入了TurboQuant,这是一种新的基于旋转的向量量化方法,提供8x、16x和32x的压缩率。与标量量化和二进制量化相比,TurboQuant在存储效率和召回率上表现更佳。建议用户在测试数据上尝试TurboQuant配置,以实现更高的召回率和更低的存储需求。该方法无需数据集训练,适用于各种嵌入模型。
传统数据库在高并发时序场景下性能不足,瀚高数据库的时序数据库解决方案可实现每秒500万点写入,压缩率达到10:1,显著提升查询响应时间,支持数字化转型。
COMI团队提出了一种新型长文本压缩方法,通过边际信息增益(MIG)优化相关性与多样性,解决了高压缩率下性能下降的问题。在32倍压缩下,该方法显著提升了模型推理能力,确保多样化信息的保留,推动了大模型的轻量化与实用化。
PDF协会决定将JPEG XL作为首选图像格式,尽管谷歌已停止支持该格式。JPEG XL提供高达60%的压缩率提升和HDR等功能,适用于多种现代应用。尽管面临挑战,JPEG XL在医学影像和摄影领域的应用仍在扩大,预计未来将在出版和企业内容管理等行业得到更广泛应用。
SakanaAI推出的Text-to-LoRA(T2L)技术简化了大模型的微调流程,用户只需一句话即可生成LoRA,压缩率达到80%,准确率仅下降1.2%。该技术使非技术用户能够轻松适配模型,推动“文本驱动”时代的到来。
Parquet是一种开源列式存储格式,适用于Apache Spark和Hadoop等大数据处理框架。它通过列存储提供高压缩率和查询性能,支持模式演变,兼容多种大数据工具。尽管写入速度较慢,不适合实时流处理或小数据集,但非常适合大规模分析工作负载。
本文提出了一种新颖的紧凑视频自编码器VidTwin,通过解耦视频的结构和动态潜在向量,解决了视频生成中的压缩与质量平衡问题。实验表明,VidTwin在视频重建中实现了高达0.20%的压缩率,并在生成任务中表现优异,为未来研究奠定了基础。
RaBitQ算法通过优化多位量化,显著提升了向量搜索的准确性和效率,支持任意压缩率,有效降低空间消耗和服务成本。实验结果显示,RaBitQ在2位及以上量化中优于现有技术,已被多个实际系统采用。
清华大学研究团队开发的EvoAI方法,通过识别锚点压缩蛋白质序列空间,结合深度学习和高通量实验,显著提高了蛋白质设计的效率和功能性。该方法在2024年《Nature Methods》上发表,仅需82个锚点即可实现1048倍的序列空间压缩,推动了生物技术和医学应用的发展。
使用Timescale的混合行列存储引擎时,压缩率可达90%以上。PostgreSQL的TOAST机制默认使用pglz压缩,但LZ4压缩在性能和效率上更优。启用LZ4后,查询性能显著提升,特别是在处理文本或JSON列时。通过简单设置即可启用LZ4,未来新数据将自动使用该压缩方式。
本研究提出了一种细粒度量化技术,有效解决了大语言模型在多硬件加速器推理中的通信延迟问题,实现了3.5到4.5倍的压缩率,首次令牌响应时间缩短最多2倍,且对模型性能影响微小。
本文介绍了1bit量化embedding模型,强调其在相似度计算中的优势,具有32倍的压缩率和25倍的检索速度,同时保持95%的检索准确率。此外,提到Sentence Transformers库支持超过1万个embedding模型。
我提出了一种将数字压缩为Base64的算法,压缩率约为55%,适用于不以零开头的长数字。示例代码展示了如何压缩和解压缩数字,压缩后10,000位数字可缩减至5,537字符。期待更快或更高压缩率的算法分享。
研究论文介绍了一种名为KV-Compress的新技术,用于高效压缩注意力模型的键值缓存。KV-Compress通过对不同注意力头应用可变压缩率,减少不重要部分的内存占用,同时保持模型性能。实验表明,该技术在多种模型中有效,内存压缩率最高可达2.6倍。
本文介绍了多种基于学习的点云几何压缩方法,包括自编码器和神经网络技术,这些方法显著提高了压缩率和视觉效果。研究表明,这些方法在不同数据集上表现优异,尤其在低比特率下仍能保持高质量输出。
据报道,iPhone 16系列相机将支持使用JPEG-XL格式,该格式具有更高的压缩率和快速渲染速度。苹果带来了对JPEG-XL的支持,引起了Chromium社区的讨论。JPEG-XL是一种免税的图像文件格式,压缩率比JPEG高300%。然而,要在Chromium和Android上支持JPEG-XL可能会有困难,但其他公司通常会跟随苹果提供支持。未来JPEG-XL能否重振JPEG格式的盛况还不确定,取决于谷歌是否重新提供支持。
腾讯编码器在MSU世界视频编码器大赛中获得全场最佳,包揽了全部15项指标的第一名。腾讯TV编码器在各类编码器中取得14个第一,分别在H.266、H.265、AV1和AVS3赛道中包揽了全部15项指标的第一。腾讯编码器在压缩率和编码速度方面表现出色,为腾讯云媒体处理产品提供了支持。
这是一个纯前端实现的视频压缩工具,压缩率可达80% - 90%。使用简单,拖入视频或选择文件后点击压缩按钮即可。压缩速度取决于设备性能。
本文介绍了一种基于多尺度自动编码器的点云压缩方法,利用稀疏特性实现高效的无损和有损压缩。该方法在多个数据集上表现优越,显著提高了压缩率和编码速度,相较于现有标准如MPEG G-PCC,节省了大量数据。
完成下面两步后,将自动完成登录并继续当前操作。