Series ESP-WebRTC: Video Call & Streaming Thời Gian Thực Với ESP32

Từ lý thuyết ICE/STUN/TURN đến dự án video doorbell, voice assistant GPT-4o và stream lên AWS KVS.

13 bài

Từ lý thuyết ICE/STUN/TURN đến dự án video doorbell, voice assistant GPT-4o và stream lên AWS KVS.

Tổng quan lộ trình 13 bài: kiến trúc WebRTC trên ESP32, các dự án thực chiến sẽ xây dựng và những gì bạn cần chuẩn bị trước khi bắt đầu.

Giải thích WebRTC từ đầu: ICE candidate, STUN/TURN, SDP offer/answer bằng diagram trực quan. Nền tảng để lập trình ESP-WebRTC trên ESP32.

Khai thác H.264 hardware encoder trên ESP32-P4: cấu hình pipeline video, so sánh với MJPEG software encode, FPS và CPU thực tế.

WHIP protocol là gì, cách tự deploy WHIP server bằng Docker, kết nối ESP32 vào signaling server trong 30 phút. Có thể thay bằng Janus hoặc AppRTC.

So sánh Opus, G.711A và G.711U trên ESP32: latency, băng thông, CPU load. Benchmark thực tế để chọn codec âm thanh WebRTC tối ưu.

Kết nối ESP32 trực tiếp với OpenAI Realtime API qua WebRTC: micro → GPT-4o → speaker. AI voice assistant chạy trên phần cứng nhúng.

Tại sao STUN không đủ khi ESP32 sau NAT đối xứng, cách cấu hình coturn TURN server, test kết nối WebRTC xuyên router thực tế.

Hướng dẫn wiring camera DVP và micro I2S vào ESP32, cấu hình ESP-Capture và AV-Render pipeline từ capture đến packet WebRTC.

So sánh ESP32-P4 EV Board và ESP32-S3 Korvo-1 cho dự án WebRTC: H.264 hardware encode, RAM, camera interface, giá thực tế.

Xây video doorbell hoàn chỉnh với ESP32-P4: camera ngoài cửa, nút bấm, nhận cuộc gọi video trực tiếp trên browser không cần app.

Dùng ESP32 làm bridge chuyển USB camera thành WebRTC stream truy cập qua browser — không cần PC, không cần phần mềm phụ.

Xây hệ thống intercom 2 chiều: ESP32 (camera + mic + speaker) ↔ browser — audio và video thời gian thực, không qua app trung gian.

Hướng dẫn từng bước clone esp-webrtc-solution, cấu hình ESP-IDF và build chạy demo WebRTC đầu tiên trên ESP32-P4 EV Board.

Cấu hình Amazon Kinesis Video Streams (KVS) WebRTC với ESP32: stream camera lên AWS, xem từ bất cứ đâu qua KVS viewer.