Architecting Life
·
桌面小电视新思路，ESP32-S3 + 12864 OLED 串流视频
内容提要
文章介绍了如何使用ESP32-S3作为视频播放设备，通过WebSocket从电脑串流视频数据到OLED显示屏。利用ffmpeg库处理视频帧并转换为适合OLED的格式，ESP32-S3接收并渲染显示，充分发挥其双核能力，显示效果良好，未来计划尝试彩色LCD。
关键要点
-
ESP32-S3被用作视频播放设备，通过WebSocket从电脑串流视频数据到OLED显示屏。
-
OLED显示屏分辨率为128x64，单帧数据大小为1,024字节，串流30 FPS的流量为30 KB/s。
-
视频处理在电脑端完成，ESP32-S3只需接收数据并写入OLED显存，减轻了其压力。
-
使用WebSocket作为通信协议，简化了数据传输过程，每个消息对应一帧数据。
-
在电脑端使用ffmpeg库处理视频帧，包括缩放、灰度化、二值化和编码为OLED数据格式。
-
ESP32-S3创建WebSocket Server，监听81端口，接收Binary类型消息并发送到渲染队列进行显示。
-
未来计划尝试使用彩色LCD，探索ESP32-S3在推流、解码和渲染方面的表现。
延伸解读
ESP32-S3的优势
ESP32-S3作为视频播放设备，利用其双核能力和WebSocket协议，能够高效地接收和渲染视频数据。通过将大部分图像处理工作放在电脑端，ESP32-S3的负担大大减轻，使得其在串流视频时表现出色。
视频处理的关键
在电脑端使用ffmpeg库进行视频处理是实现高效串流的关键。通过缩放、灰度化和二值化等步骤，确保视频帧适配OLED显示屏的要求。这种处理方式不仅提高了显示效果，也优化了数据传输的效率。
未来发展方向
文章提到未来计划尝试使用彩色LCD，这将是对ESP32-S3在视频推流和解码能力的进一步挑战。彩色显示将需要更高的数据处理能力，读者可以关注这一技术进展对设备性能的影响。
延伸问答
ESP32-S3如何用于视频播放？
ESP32-S3通过WebSocket从电脑串流视频数据到OLED显示屏，作为视频播放设备。
使用ESP32-S3播放视频的流程是怎样的？
流程包括在电脑端使用ffmpeg处理视频帧，然后通过WebSocket发送到ESP32-S3，最后在OLED上显示。
ESP32-S3的OLED显示屏分辨率是多少？
OLED显示屏的分辨率为128x64。
为什么选择WebSocket作为通信协议？
WebSocket简化了数据传输过程，每个消息对应一帧数据，方便高效。
在电脑端如何处理视频帧？
使用ffmpeg库将视频帧缩放、灰度化、二值化并编码为OLED数据格式。
未来对ESP32-S3的计划是什么？
未来计划尝试使用彩色LCD，探索ESP32-S3在推流、解码和渲染方面的表现。
