Apple「随航」的无感体验里，藏着多少流畅的秘密？
内容提要
随航功能在WWDC26迎来史诗级更新，支持iPad触控屏操控macOS。文章从技术层面解析其流畅体验：通过HEVC编码压缩画面，利用帧内预测、帧间预测及残差技术减少数据量，结合虚拟屏幕渲染、编码、传输、解码流程，实现低延迟无线传输。
延伸解读
流畅背后的编码智慧
随航的流畅体验并非仅靠硬件，而是得益于HEVC编码的巧妙设计。通过帧内预测、帧间预测和残差技术，系统能大幅压缩画面数据，减少无线传输负担。例如，静态UI区域可利用帧间预测减少重复编码，而复杂动态区域则通过残差补充细节，从而实现低延迟传输。
从第三方到系统级：体验的跃迁
随航并非首创，早期iDisplay、Air Display等第三方方案因延迟高、不稳定而体验不佳。Duet Display虽改用有线连接，但仍受CPU占用和延迟困扰。Apple将类似功能整合进系统，通过软硬件协同优化，实现了近乎无感的体验，体现了系统级整合的优势。
触控新特性：便利与局限并存
WWDC26的更新让iPad触控屏可操控macOS，但当前多数macOS应用仍以键鼠逻辑设计，触控操作多由系统转译为鼠标事件。因此，虽然延迟低，但实际体验可能仍需适应，部分用户可能仍倾向传统键鼠。
Q&A
随航（Sidecar）是什么？如何使用？
随航是苹果的一项功能，通过无线或有线方式将 iPad 作为 Mac 的扩展显示屏。使用时，在 Mac 菜单栏点击「控制中心 > 屏幕镜像」，选择「镜像或扩展至」中的 iPad；或前往「系统设置 > 显示器」，在底部选择「镜像或扩展至 iPad」并选择设备。
随航在 WWDC26 有哪些更新？
在 WWDC26 发布的 iPadOS 27 与 macOS Golden Gate 中，随航支持通过 iPad 触控屏用手指操控 macOS，这是史诗级更新。目前 Beta 版本中触控延迟几乎难以察觉，但大部分应用尚未针对触控优化，操作本质是系统转译为鼠标操作。
随航流畅体验的技术原理是什么？
随航流畅体验的关键在于高效的视频编码和传输流程。画面经过虚拟屏幕渲染后，使用 HEVC（H.265）编码压缩，利用帧内预测、帧间预测和残差技术大幅减少数据量，再通过无线传输到 iPad 解码显示。相比第三方方案，苹果在编码和传输环节的优化更精密。
HEVC 编码是如何实现高压缩率的？
HEVC 编码通过分块、帧内预测、帧间预测和残差编码实现高压缩率。它将画面划分为编码树单元（CTU），根据复杂度进一步划分。帧内预测利用当前帧相邻像素预测，帧间预测利用前后帧相似区域预测，并记录运动矢量。预测后仅存储残差（差异），再经变换、量化等处理，从而大幅减少数据量。
随航与第三方类似软件（如 Duet Display）相比有何优势？
随航的优势在于苹果将其深度集成于系统，编码和传输流程优化更完善，延迟更低、更流畅。第三方软件如 Duet Display 虽采用有线连接，但本质仍是虚拟屏幕加传输，占用大量 CPU，旧款 Mac 可能出现延迟和卡顿。随航则通过 HEVC 编码和系统级优化，实现了接近无感的体验。
随航支持哪些 iPad 特性？
随航支持 Apple Pencil，可直接在 iPad 屏幕上操作 Mac 应用，并保留压感、倾斜等笔触信息；在 WWDC26 更新后，还支持用手指触控操作 macOS。
随航传输的是原始画面还是压缩后的视频流？
随航传输的是经过 HEVC 编码压缩后的视频流，而非原始画面。原始画面数据量巨大（例如 2388×1668 分辨率 60Hz 每秒接近 1GB），无法通过无线稳定传输，因此必须编码压缩。
随航的延迟为什么低？
随航延迟低得益于高效的 HEVC 编码和系统级优化。编码器利用帧内预测、帧间预测和残差技术，大幅减少传输数据量，同时苹果对编码、传输、解码流程进行了精密协同，确保低延迟无线传输。
