Perceptual Image Codec: 实际学习型图像压缩中的关键因素

Hacker News Top 论文

摘要

PICO (Perceptual Image Codec) 是苹果公司推出的一种新型学习型编解码器,针对人类视觉系统进行了优化,相比AV1和VVC等传统编解码器可节省2.3–3倍的比特率,同时在iPhone 17 Pro Max上实现230毫秒编码/150毫秒解码。

暂无内容
查看原文
查看缓存全文

缓存时间: 2026/05/24 15:40

# 实用型学习式图像压缩的关键因素 来源:https://apple.github.io/ml-pico/ ## 关于 (https://apple.github.io/ml-pico/index.html#about) 我们推出了 PICO(感知图像编解码器)—— 首款既实用又直接针对人类视觉系统优化的学习式编解码器。为了推导出它,我们对实用学习式编解码器的建模选择进行了全面研究,并在数百万个模型配置中进行搜索,以联合优化感知质量和设备端运行时。 基于大规模主观用户研究,PICO 在 AV1、AV2、VVC、ECM 和 JPEG-AI 的基础上实现了 **2.3–3 倍码率节省**,相比最佳学习式编解码器替代方案则实现了 **20–40% 码率节省**。同时,在 iPhone 17 Pro Max 上,它编码 1200 万像素图像的速度快至 **230 毫秒**,解码速度为 **150 毫秒** —— 比大多数顶级基于机器的编解码器在 V100 GPU 上运行还要快。与大多数学习式编解码器不同,PICO 还提供了跨平台的鲁棒性保证。 不同图像之间的交互式比较。PICO(我们的)固定在左侧。从叠加按钮中选择图像和比较方法,然后拖动滑块进行比较。建议在大屏幕上观看。 最先进的传统与学习式编解码器在不同实用性考量下的比较。 PICO 与传统及学习式编解码器的性能比较 最先进的传统与学习式编解码器比较。感知 BD 码率基于来自大规模主观研究的人类评分。iPhone 17 Pro Max 上的速度基准测试使用相同的编译器优化。 ## 引用 (https://apple.github.io/ml-pico/index.html#citation) 如果您觉得我们的工作有用,请引用: `` @article{tatwawadi2026pico, title={What Matters in Practical Learned Image Compression}, author={Tatwawadi, Kedar and Rahimzadeh, Parisa and Sun, Zhanghao and Chen, Zhiqi and Yang, Ziyun and Nair, Sanjay and Hasteer, Divija and Rippel, Oren}, journal={arXiv preprint arXiv:2605.05148}, year={2026} } ``

相似文章

PivCo-Huffman

Lobsters Hottest

本文介绍了PivCo-Huffman,一种利用小波树中的枢轴编码进行霍夫曼编码的新方法,实现了高性能的SIMD友好编码和解码。它始终优于最先进的霍夫曼编解码器,并展示了如何将ANS编码选择性地应用于偏斜节点,以接近ANS压缩比,同时保持高解压缩速度。

AdaCodec:面向视频多模态大模型的预测性视觉编码

Hugging Face Daily Papers

AdaCodec 通过仅在场景预测失败时传输完整视觉标记,否则使用紧凑的帧间变化描述,从而减少多模态大模型中的视频编码冗余。在匹配的标记预算下,它优于逐帧 RGB 基线,并且在使用显著更少标记的情况下取得更好或相当的结果,将首令牌延迟从 9.26 秒降至 1.62 秒。

PiD:基于像素扩散的快速高分辨率潜在解码

Hugging Face Daily Papers

PiD 提出了一种像素扩散解码器,将潜在解码重新定义为条件像素扩散,从而在高分辨率下实现快速、高质量的图像合成,并降低计算需求。在消费级硬件上,它能在不到一秒内将潜在表示解码为 4 倍或 8 倍放大图像。

基于隐式神经表示的数据驱动视频编解码器

arXiv cs.AI

本文提出一种视频编解码器,将视频和音频存储为正弦表示网络(SIREN)的权重,利用知识蒸馏和量化进行压缩。实验显示,与原始网络相比压缩比为2.61倍,但质量落后于H.264和HEVC等标准编解码器。